CityLearnは、強化学習を用いたエネルギー管理研究のためのモジュール式シミュレーションプラットフォームです。ユーザーは、多ゾーン建物クラスター、HVACシステム、貯蔵ユニット、再生可能エネルギー源を定義し、需要応答イベントに対してRLエージェントを訓練できます。環境は温度、負荷プロファイル、エネルギー価格などの状態観測を提供し、アクションは設定点や貯蔵運用を制御します。柔軟な報酬APIは、コスト削減や排出削減などのカスタムメトリクスを可能にし、ロギングユーティリティは性能分析をサポートします。CityLearnは、ベンチマーク、カリキュラム学習、新しい制御戦略の開発に理想的な再現性のある研究フレームワークです。

JADE-DR-VPPは、仮想発電所（VPP）の需要反応（DR）を実現するマルチエージェントシステムを実装したオープンソースのJavaフレームワークです。各エージェントは、JADEメッセージングを通じて通信する柔軟な負荷または発電ユニットを表します。システムは、DRイベントの調整、負荷調整のスケジューリング、リソースの集約を行い、グリッドシグナルに対応します。ユーザーはエージェントの挙動を設定し、大規模なシミュレーションを実行し、エネルギーマネジメント戦略のパフォーマンス指標を分析できます。