CityLearn bietet eine modulare Simulationsplattform für die Energieforschung mittels Verstärkungslernen. Benutzer können mehrzonenfähige Gebäudepakete, HVAC-Systeme, Speichereinheiten und erneuerbare Energiequellen definieren und RL-Agenten gegen Demand-Response-Ereignisse trainieren. Die Umgebung liefert Zustandsbeobachtungen wie Temperaturen, Lastprofile und Energiepreise, während Aktionen Setpoints und Speichersteuerung übernehmen. Eine flexible Belohnungs-API ermöglicht benutzerdefinierte Metriken—wie Kosteneinsparungen oder Emissionsreduktionen—and Logging-Tools unterstützen die Leistungsanalyse. CityLearn ist ideal für Benchmarking, Curriculum-Learning und die Entwicklung neuer Steuerungskonzepte in einem reproduzierbaren Forschungsrahmen.

OpenSpiel ist ein Forschungsrahmen, der eine Vielzahl von Umgebungen bereitstellt (von einfachen Matrixspielen bis hin zu komplexen Brettspielen wie Schach, Go und Poker) und verschiedene Reinforcement-Learning- und Suchalgorithmen implementiert (z.B. Wertiteration, Policy-Gradient-Methoden, MCTS). Sein modulares C++-Kernstück und Python-Bindings ermöglichen es Nutzern, eigene Algorithmen zu integrieren, neue Spiele zu definieren und Leistungen anhand standardisierter Benchmarks zu vergleichen. Für Erweiterbarkeit konzipiert, unterstützt es einzelne und multi-agenten Szenarien, um kooperative und wettbewerbsorientierte Situationen zu untersuchen. Forscher nutzen OpenSpiel, um Algorithmen schnell zu prototypisieren, groß angelegte Experimente durchzuführen und reproduzierbaren Code zu teilen.