HFO_DQN combina Python e TensorFlow para fornecer um pipeline completo para treinar agentes de futebol usando Deep Q-Networks. Os usuários podem clonar o repositório, instalar dependências incluindo o simulador HFO e bibliotecas Python, e configurar os parâmetros de treinamento em arquivos YAML. O framework implementa experiência de replay, atualizações de rede alvo, exploração epsilon-greedy e modelagem de recompensas específicas para o domínio offense de meio campo. Possui scripts para treinamento de agentes, registro de desempenho, partidas de avaliação e plotagem de resultados. A estrutura modular de código permite integrar arquiteturas de rede neural personalizadas, algoritmos RL alternativos e estratégias de coordenação multiagentes. As saídas incluem modelos treinados, métricas de desempenho e visualizações de comportamento, facilitando a pesquisa em aprendizado por reforço e sistemas multiagentes.

SoccerAgent é uma estrutura de IA especializada projetada para desenvolver e treinar agentes autônomos de futebol usando técnicas avançadas de aprendizado por reforço multiagente (MARL). Ela simula partidas de futebol realistas em ambientes 2D ou 3D, oferecendo ferramentas para definir funções de recompensa, personalizar atributos dos jogadores e implementar estratégias táticas. Os usuários podem integrar algoritmos populares de RL (como PPO, DDPG e MADDPG) via módulos integrados, monitorar o progresso do treinamento através de painéis de controle e visualizar comportamentos dos agentes em tempo real. A estrutura suporta treinamentos baseados em cenários para ataque, defesa e protocolos de coordenação. Com uma base de código extensível e documentação detalhada, SoccerAgent capacita pesquisadores e desenvolvedores a analisar dinâmicas de equipe e refinar estratégias de jogo impulsionadas por IA para projetos acadêmicos e comerciais.