HFO_DQN kombiniert Python und TensorFlow, um eine vollständige Pipeline für das Training von Fußballagenten mithilfe von Deep Q-Networks bereitzustellen. Benutzer können das Repository klonen, Abhängigkeiten einschließlich des HFO-Simulators und Python-Bibliotheken installieren sowie Trainingsparameter in YAML-Dateien konfigurieren. Das Framework implementiert Erfahrungsspeicherung, Zielnetzwerk-Updates, epsilon-greedy Erkundung und Belohnungsformung, die speziell für die Half-Field-Offense-Domäne angepasst sind. Es verfügt über Skripte für das Training von Agenten, Leistungsprotokollierung, Evaluierungsspiele und Ergebnisvisualisierung. Modulare Code-Struktur ermöglicht die Integration eigener neuronaler Netzwerkarchitekturen, alternativer RL-Algorithmen und Multi-Agenten-Koordinationsstrategien. Die Ausgaben umfassen trainierte Modelle, Leistungsmetriken und Verhaltensvisualisierungen, die die Forschung im Bereich Reinforcement Learning und Multi-Agent-Systeme erleichtern.

SoccerAgent ist ein spezialisiertes KI-Framework zur Entwicklung und zum Training autonomer Fußballagenten mit modernsten Multi-Agenten-Verstärkungslernmethoden (MARL). Es simuliert realistische Fußballspiele in 2D- oder 3D-Umgebungen und bietet Werkzeuge zur Definition von Belohnungsfunktionen, Anpassung von Spielerattributen und Implementierung taktischer Strategien. Nutzer können gängige RL-Algorithmen wie PPO, DDPG und MADDPG über integrierte Module integrieren, den Trainingsfortschritt auf Dashboards überwachen und Agentenverhalten in Echtzeit visualisieren. Das Framework unterstützt szenarienbasiertes Training für Angriffs-, Verteidigungs- und Koordinationsprotokolle. Mit einer erweiterbaren Codebasis und ausführlicher Dokumentation ermöglicht SoccerAgent Forschern und Entwicklern, Teamdynamiken zu analysieren und KI-gesteuerte Spielstrategien für wissenschaftliche und kommerzielle Projekte zu verfeinern.