Dieses Open-Source-Projekt liefert ein vollständiges Multi-Agent-Verstärkungslernen-Framework, das auf PyTorch und Unity ML-Agents basiert. Es bietet dezentrale DDPG-Algorithmen, Umgebungs-Wrapper und Trainingsskripte. Nutzer können Agentenrichtlinien, Kritiker-Netzwerke, Replay-Puffer und parallele Trainings-Worker konfigurieren. Log-Hooks ermöglichen die Überwachung mit TensorBoard, während modulare Code-Strukturen benutzerdefinierte Belohnungsfunktionen und Umgebungsparameter unterstützen. Das Repository umfasst Beispiel-Szenen in Unity, die kollaborative Navigationsaufgaben demonstrieren, und ist damit ideal, um Multi-Agent-Szenarien in Simulationen zu erweitern und zu benchmarking.

Acme ist ein auf Python basierendes Framework, das die Entwicklung und Bewertung von Reinforcement-Learning-Agenten vereinfacht. Es bietet eine Sammlung von vorgefertigten Agentenimplementierungen (z.B. DQN, PPO, SAC), Umgebungs-Wrapper, Replay-Puffer und verteilte Ausführungsmaschinen. Forscher können Komponenten kombinieren, um neue Algorithmen zu prototypisieren, Trainingsmetriken mit integriertem Logging zu überwachen und skalierbare verteilte Pipelines für groß angelegte Experimente zu nutzen. Acme integriert sich mit TensorFlow und JAX, unterstützt benutzerdefinierte Umgebungen via OpenAI Gym-Interfaces und enthält Hilfsprogramme für Checkpoints, Evaluationen und Hyperparameter-Konfigurationen.