HFO_DQN combina Python y TensorFlow para ofrecer un pipeline completo para entrenar agentes de fútbol usando Deep Q-Networks. Los usuarios pueden clonar el repositorio, instalar dependencias incluyendo el simulador HFO y bibliotecas Python, y configurar los parámetros de entrenamiento en archivos YAML. El marco implementa reproducción de experiencias, actualizaciones del red objetivo, exploración epsilon-greedy y modelado de recompensas adaptado al dominio de ofensiva de medio campo. Incluye scripts para entrenamiento de agentes, registro de rendimiento, partidas de evaluación y visualización de resultados. La estructura modular permite integrar arquitecturas de redes neuronales personalizadas, algoritmos RL alternativos y estrategias de coordinación multiagente. Las salidas incluyen modelos entrenados, métricas de rendimiento y visualizaciones del comportamiento, facilitando investigaciones en aprendizaje por refuerzo y sistemas multiagente.

SoccerAgent es un marco de IA especializado diseñado para desarrollar y entrenar agentes de fútbol autónomos usando técnicas avanzadas de aprendizaje por refuerzo multiagente (MARL). Simula partidos de fútbol realistas en entornos 2D o 3D, ofreciendo herramientas para definir funciones de recompensa, personalizar atributos de jugadores e implementar estrategias tácticas. Los usuarios pueden integrar algoritmos populares de RL (como PPO, DDPG y MADDPG) mediante módulos integrados, monitorear el progreso del entrenamiento a través de paneles de control y visualizar comportamientos de los agentes en tiempo real. El marco soporta entrenamiento basado en escenarios para ofensiva, defensa y protocolos de coordinación. Con una base de código extensible y documentación detallada, SoccerAgent capacita a investigadores y desarrolladores a analizar dinámicas de equipos y perfeccionar estrategias de juego basadas en IA para proyectos académicos y comerciales.