CityLearn은 강화학습을 활용한 에너지 관리 연구를 위한 모듈형 시뮬레이션 플랫폼입니다. 사용자는 다구역 건물 클러스터, HVAC 시스템, 저장 유닛, 재생 에너지원을 정의하고 수요 반응 이벤트에 대응하는 RL 에이전트를 훈련시킬 수 있습니다. 환경은 온도, 부하 프로파일, 에너지 가격 등의 상태 관측값을 제공하며, 행동은 설정점과 저장 디스패치를 제어합니다. 유연한 보상 API는 비용 절감 또는 배출 감축과 같은 맞춤형 메트릭을 허용하며, 로깅 유틸리티는 성능 분석을 지원합니다. CityLearn은 벤치마크, 커리큘럼 학습, 새로운 제어 전략 개발에 적합합니다.

JADE-DR-VPP는 가상발전소(VPP)의 수요 반응(DR)을 구현하는 오픈소스 Java 프레임워크입니다. 각 에이전트는 JADE 메시징을 통해 통신하는 유연한 부하 또는 발전 유닛을 나타내며, 시스템은 DR 이벤트를 조정하고, 부하 조정을 예약하며, 그리드 신호에 맞게 자원을 집계합니다. 사용자는 에이전트 행동을 구성하고, 대규모 시뮬레이션을 실행하며, 에너지 관리 전략의 성능 지표를 분석할 수 있습니다.