Halite II ist ein Open-Source-Herausforderungsrahmen, der rundenbasierte Strategiespiele zwischen benutzerdefinierten Bots hostet. In jeder Runde erhalten die Agenten einen Kartenstatus, geben Bewegungs- und Angriffsbefehle aus und konkurrieren darum, das meiste Territorium zu kontrollieren. Die Plattform umfasst einen Spielserver, einen Kartenparser und ein Visualisierungstool. Entwickler können lokal testen, Heuristiken verfeinern, die Leistung unter Zeitdruck optimieren und ihre Bots auf einer Online-Rangliste einreichen. Das System unterstützt iterative Bot-Verbesserungen, Multi-Agenten-Kooperationen und Strategieforschung in einer standardisierten Umgebung.

Pits and Orbs ist eine Open-Source-Umgebung für Verstärkendes Lernen, implementiert in Python, die eine rundenbasierte Multi-Agenten-Gitterswelt bietet, in der Agenten Zielsetzungen verfolgen und Umweltgefahren begegnen. Jeder Agent muss ein anpassbares Gitter navigieren, zufällig platzierte Fallen meiden, die Episoden bestrafen oder beenden, und Orbs für positive Belohnungen sammeln. Die Umgebung unterstützt sowohl Wettbewerbs- als auch Kooperationsmodi, sodass Forscher verschiedene Lernszenarien erkunden können. Ihre einfache API integriert sich nahtlos mit beliebten RL-Bibliotheken wie Stable Baselines oder RLlib. Zu den Hauptmerkmalen gehören anpassbare Gittergrößen, dynamische Fallen- und Orb-Verteilungen, konfigurierbare Belohnungsstrukturen und optionales Logging für das Trainings-Tracking.