MARL-DPP는 결정점 프로세스(DPP)를 통해 다양성을 강제하는 오픈소스 프레임워크입니다. 전통적인 MARL 접근법은 정책이 유사한 행동에 수렴하는 문제를 겪는데, MARL-DPP는 DPP 기반 지표를 활용하여 에이전트가 다양한 행동 분포를 유지하도록 장려합니다. 모듈형 코드를 제공하여 DPP를 훈련 목표, 정책 샘플링, 탐색 관리에 포함시키며, OpenAI Gym 및 Multi-Agent Particle Environment(MPE)와 즉시 통합됩니다. 또한 하이퍼파라미터 관리, 로깅, 다양성 메트릭 시각화 유틸리티를 포함합니다. 연구자는 협력적 과제, 자원 할당 및 경쟁 게임에서 다양성 제약의 영향을 평가할 수 있으며, 확장 가능한 설계 덕분에 사용자 정의 환경과 고급 알고리즘도 지원하여 새로운 MARL-DPP 변형을 탐구할 수 있습니다.

RL-Agents는 PyTorch 기반 연구등급 강화학습 프레임워크로, 가치기반, 정책기반, 액터-비평가 방법의 인기 알고리즘을 모두 포함합니다. 이 라이브러리는 모듈형 에이전트 API, GPU 가속, OpenAI Gym과의 원활한 통합, 내장 로깅 및 시각화 도구를 갖추고 있습니다. 사용자들은 하이퍼파라미터를 설정하고, 훈련 루프를 커스터마이징하며, 적은 코드로 성능 벤치마크를 수행할 수 있어 학술 연구, 프로토타이핑, 산업 실험에 이상적입니다.