CybMASDE는 연구자와 개발자가 딥 강화 학습이 포함된 다중 에이전트 시뮬레이션을 구축, 구성, 실행할 수 있게 합니다. 사용자들은 맞춤 시나리오를 작성하고, 에이전트 역할과 보상 기능을 정의하며, 표준 또는 맞춤 RL 알고리즘을 연결할 수 있습니다. 이 프레임워크는 환경 서버, 네트워크 에이전트 인터페이스, 데이터 수집기, 렌더링 유틸리티를 포함합니다. 병렬 훈련, 실시간 모니터링, 모델 체크포인팅을 지원하며, 모듈 식 구조 덕분에 새로운 에이전트, 관찰 공간, 훈련 전략의 통합이 원활하게 이뤄집니다. 협력 제어, 군집 행동, 자원 할당 등 다양한 다중 에이전트 사용 사례의 실험을 가속화합니다.

Deep Trading Agent는 알고리즘 거래를 위한 전체 파이프라인을 제공합니다: 데이터 수집, OpenAI Gym 호환 환경 시뮬레이션, 딥 RL 모델 훈련(예: DQN, PPO, A2C), 성과 시각화, 과거 데이터 기반 백테스트, 브로커 API 연결을 통한 실시간 배포. 사용자는 맞춤 보상 지표를 정의하고, 하이퍼파라미터를 조정하며, 실시간으로 에이전트 성능을 모니터링할 수 있습니다. 모듈화된 구조는 주식, 외환, 암호화폐 시장을 지원하며, 새로운 자산 클래스에 대한 확장도 원활히 가능합니다.

MAPF_G2RL은 그래프 이론과 딥 강화 학습을 연결하여 다중 에이전트 경로 탐색(MAPF) 문제를 해결하는 오픈소스 연구 프레임워크입니다. 노드와 엣지를 벡터 표현으로 인코딩하고, 공간적 및 충돌 인지 보상 함수를 정의하며, DQN, PPO, A2C와 같은 다양한 RL 알고리즘을 지원합니다. 이 프레임워크는 랜덤 그래프 생성 또는 실제 지도 임포트로 시나리오 생성을 자동화하고, 동시에 여러 에이전트의 정책을 최적화하는 훈련 루프를 조율합니다. 학습 후, 에이전트는 시뮬레이션 환경에서 경로 최적성, 소요 시간, 성공률을 평가합니다. 모듈형 설계로 연구자는 핵심 컴포넌트를 확장하고, 새로운 MARL 기법을 통합하며, 기존 솔버와 비교 벤치마킹할 수 있습니다.