MARTI (Multi-Agent Reinforcement Learning Toolkit and Interface) ist ein forschungsorientiertes Framework, das die Entwicklung, Bewertung und Benchmarking von Multi-Agenten-RL-Algorithmen vereinfacht. Es bietet eine Plug-and-Play-Architektur, bei der Benutzer benutzerdefinierte Umgebungen, Agentenrichtlinien, Belohnungsstrukturen und Kommunikationsprotokolle konfigurieren können. MARTI integriert sich mit beliebten Deep-Learning-Bibliotheken, unterstützt GPU-Beschleunigung und verteiltes Training und erzeugt detaillierte Protokolle sowie Visualisierungen für die Leistungsanalyse. Das modulare Design des Toolkits ermöglicht eine schnelle Prototypisierung neuer Ansätze und einen systematischen Vergleich mit Standard-Baselines, was es ideal für die akademische Forschung und Pilotprojekte in autonomen Systemen, Robotik, Spiel-KI und kooperativen Multi-Agenten-Szenarien macht.

Pits and Orbs ist eine Open-Source-Umgebung für Verstärkendes Lernen, implementiert in Python, die eine rundenbasierte Multi-Agenten-Gitterswelt bietet, in der Agenten Zielsetzungen verfolgen und Umweltgefahren begegnen. Jeder Agent muss ein anpassbares Gitter navigieren, zufällig platzierte Fallen meiden, die Episoden bestrafen oder beenden, und Orbs für positive Belohnungen sammeln. Die Umgebung unterstützt sowohl Wettbewerbs- als auch Kooperationsmodi, sodass Forscher verschiedene Lernszenarien erkunden können. Ihre einfache API integriert sich nahtlos mit beliebten RL-Bibliotheken wie Stable Baselines oder RLlib. Zu den Hauptmerkmalen gehören anpassbare Gittergrößen, dynamische Fallen- und Orb-Verteilungen, konfigurierbare Belohnungsstrukturen und optionales Logging für das Trainings-Tracking.

MultiAgentModel stellt eine einheitliche API bereit, um benutzerdefinierte Umgebungen und Agentenklassen für Multi-Agenten-Szenarien zu definieren. Entwickler können Beobachtungs- und Aktionsräume, Belohnungsstrukturen und Kommunikationskanäle spezifizieren. Unterstützt werden beliebte RL-Algorithmen wie PPO, DQN und A2C, die mit minimaler Konfiguration trainiert werden können. Echtzeit-Visualisierungstools helfen dabei, Agenteninteraktionen und Leistungsmetriken zu überwachen. Die modulare Architektur gewährleistet eine einfache Integration neuer Algorithmen und benutzerdefinierter Module. Es enthält außerdem ein flexibles Konfigurationssystem für Hyperparameter-Optimierung, Logging-Utilities für Versuchsverfolgung und ist kompatibel mit OpenAI Gym-Umgebungen für nahtlose Portabilität. Benutzer können an gemeinsamen Umgebungen zusammenarbeiten und protokollierte Sitzungen zur Analyse wiedergeben.