Dieses Repository implementiert emergente Kommunikation im Multi-Agenten-Verstärkungslernen mit PyTorch. Benutzer können neuronale Netzwerke für Sender und Empfänger konfigurieren, um referenzielle Spiele oder kooperative Navigation zu spielen, und so Agenten dazu ermutigen, einen diskreten oder kontinuierlichen Kommunikationskanal zu entwickeln. Es bietet Skripte für Training, Bewertung und Visualisierung gelernter Protokolle sowie Hilfsmittel für die Erstellung von Umgebungen, Nachrichtenkodierung und -decodierung. Forscher können es mit benutzerdefinierten Aufgaben erweitern, Netzarchitekturen anpassen und die Effizienz der Protokolle analysieren, um schnelle Experimente in emergenter Agentenkommunikation zu ermöglichen.

Mean-Field MARL bietet einen robusten Python-Rahmen für die Implementierung und Bewertung von Mean-Field-Multien-Agenten-Verstärkungslernalgorithmen. Es approximiert groß angelegte Agenteninteraktionen, indem es die durchschnittlichen Effekte benachbarter Agenten mittels Mean-Field-Q-Learning modelliert. Die Bibliothek umfasst Umgebungs-Wrapper, Agenten-Politikmodule, Trainingsschleifen und Bewertungsmesswerte, die skalierbares Training mit Hunderten von Agenten ermöglichen. Basierend auf PyTorch für GPU-Beschleunigung unterstützt es anpassbare Umgebungen wie Particle World und Gridworld. Modulares Design ermöglicht einfache Erweiterungen mit neuen Algorithmen, während integrierte Logging- und Matplotlib-Visualisierungstools Belohnungen, Verlustkurven und Mean-Field-Verteilungen verfolgen. Beispielskripte und Dokumentation führen Benutzer durch Einrichtung, Experimentskonfiguration und Ergebnisanalyse, ideal für Forschung und Prototyping groß angelegter Multi-Agenten-Systeme.

RL-Agents ist ein forschungsorientiertes Verstärkungslern-Framework, das auf PyTorch aufbaut und beliebte RL-Algorithmen aus wertbasierten, politikbasierten und actor-critic-Methoden bündelt. Die Bibliothek verfügt über eine modulare Agent-API, GPU-Beschleunigung, nahtlose Integration mit OpenAI Gym und integrierte Logging- und Visualisierungstools. Benutzer können Hyperparameter konfigurieren, Trainingsabläufe anpassen und die Leistung mit wenigen Zeilen Code benchmarken, was RL-Agents ideal für wissenschaftliche Forschung, Prototyping und industrielle Experimente macht.

Vanilla Agents ist ein leichtgewichtiges, auf PyTorch basierendes Framework, das modulare und erweiterbare Implementierungen wesentlicher Reinforcement-Learning-Agenten liefert. Es unterstützt Algorithmen wie DQN, Double DQN, PPO und A2C, mit anpassbaren Umwelt-Wrappern, die mit OpenAI Gym kompatibel sind. Benutzer können Hyperparameter konfigurieren, Trainingsmetriken protokollieren, Checkpoints speichern und Lernkurven visualisieren. Der Code ist klar strukturiert, ideal für Forschungsprototypen, Bildungszwecke und Benchmarking neuer Ideen im RL.

Emergente Kommunikation in Agenten ist ein Open-Source-PyTorch-Framework, das Forschern ermöglicht zu untersuchen, wie Multi-Agenten-Systeme ihre eigenen Kommunikationsprotokolle entwickeln. Die Bibliothek bietet flexible Implementierungen kooperativer Verstärkungslernaufgaben, einschließlich Referenzspielen, Kombinationsspielen und Objekterkennungsaufgaben. Benutzer definieren Sprecher- und Zuhörer-Agentenarchitekturen, spezifizieren Eigenschaften der Nachrichtkanäle wie Wortschatzgröße und Sequenzlänge und wählen Trainingsstrategien wie Politikgradienten oder überwachtes Lernen. Das Framework umfasst End-to-End-Skripte für Experimentdurchführung, Analyse der Kommunikationseffizienz und Visualisierung emergenter Sprachen. Das modulare Design ermöglicht eine einfache Erweiterung mit neuen Spielumgebungen oder benutzerdefinierten Verlustfunktionen. Forscher können veröffentlichte Studien reproduzieren, neue Algorithmen benchmarken und die Kompositionalität sowie Semantik der Agentensprachen untersuchen.

Der MARL Simulator ist darauf ausgelegt, die effiziente und skalierbare Entwicklung von Mehragenten-Verstärkungslern-Algorithmen zu erleichtern. Durch die Nutzung des verteilten Backends von PyTorch können Benutzer paralleles Training auf mehreren GPUs oder Knoten durchführen, was die Experimentdauer erheblich verkürzt. Der Simulator bietet eine modulare Umgebungs-Schnittstelle, die Standard-Benchmark-Szenarien wie kooperative Navigation, Räuber-Hund und Gitterwelt sowie benutzerdefinierte Umgebungen unterstützt. Agenten können verschiedene Kommunikationsprotokolle verwenden, um Aktionen zu koordinieren, Beobachtungen zu teilen und Belohnungen zu synchronisieren. Konfigurierbare Belohnungs- und Beobachtungsräume ermöglichen eine fein abgestimmte Steuerung der Trainingsdynamik, während integrierte Logging- und Visualisierungstools Echtzeit-Einblicke in Leistungsmetriken bieten.

Dieses Open-Source-Projekt liefert ein vollständiges Multi-Agent-Verstärkungslernen-Framework, das auf PyTorch und Unity ML-Agents basiert. Es bietet dezentrale DDPG-Algorithmen, Umgebungs-Wrapper und Trainingsskripte. Nutzer können Agentenrichtlinien, Kritiker-Netzwerke, Replay-Puffer und parallele Trainings-Worker konfigurieren. Log-Hooks ermöglichen die Überwachung mit TensorBoard, während modulare Code-Strukturen benutzerdefinierte Belohnungsfunktionen und Umgebungsparameter unterstützen. Das Repository umfasst Beispiel-Szenen in Unity, die kollaborative Navigationsaufgaben demonstrieren, und ist damit ideal, um Multi-Agent-Szenarien in Simulationen zu erweitern und zu benchmarking.