Shepherding ist ein Open-Source-Simulationsframework, das für Reinforcement-Learning-Forscher und Entwickler entwickelt wurde, um Multi-Agent-Hütaufgaben zu untersuchen und umzusetzen. Es bietet eine mit Gym kompatible Umgebung, in der Agenten Verhalten wie Umrunden, Sammeln und Verteilen von Zielgruppen in kontinuierlichen oder diskreten Räumen erlernen können. Das Framework umfasst modulare Belohnungsformungsfunktionen, Umgebungsparametrisierung und Logging-Tools zur Überwachung der Trainingsleistung. Benutzer können Hindernisse, dynamische Agentenzahlen und eigene Policies mit TensorFlow oder PyTorch definieren. Visualisierungsskripte erzeugen Trajektorienplots und Videos der Agenteninteraktionen. Das modulare Design von Shepherding ermöglicht eine nahtlose Integration mit bestehenden RL-Bibliotheken, um reproduzierbare Experimente, Benchmarking innovativer Koordinationsstrategien und die schnelle Entwicklung KI-gestützter Hütlösungen zu realisieren.

Code as Policies bietet einen Rahmen zur Automatisierung der Richtlinienerstellung mithilfe von Code. Es unterstützt die Benutzer bei der Definition ihrer individuellen Regeln und der Generierung konformer Richtlinien basierend auf ihren Spezifikationen. Dieses System vereinfacht nicht nur den Prozess der Richtlinienerstellung, sondern gewährleistet auch Genauigkeit und Konsistenz bei der Umsetzung der Richtlinien.