CityLearn 提供一個模組化的模擬平台，用於使用強化學習進行能源管理研究。用戶可以定義多區域的建築群、配置 HVAC 系統、儲能單元和可再生能源，然後對 RL 代理進行訓練，應對需求響應事件。這個環境會顯示狀態觀測，例如溫度、負載輪廓和能源價格，而操作則控制設定點和儲存調度。一個彈性的獎勵 API 支援自訂指標，例如節省成本或減少排放，且日誌工具支援性能分析。CityLearn 非常適合用於基準測試、課程學習以及在可重現的研究框架內開發新型控制策略。

JADE-DR-VPP 是一個開源的Java框架，實現了用於虛擬電廠（VPP）需求響應（DR）的多代理系統。每個代理代表一個彈性負載或發電單元，通過JADE消息通信。該系統協調DR事件，安排負載調整，並彙整資源以滿足電網信號。用戶可以配置代理行為，運行大規模模擬，並分析能源管理策略的性能指標。