Halite II는 사용자 작성 봇 간의 턴제 전략 경기 대회를 주최하는 오픈소스 챌린지 프레임워크입니다. 매 턴마다 인공지는 지도 상태를 수신하고, 이동 및 공격 명령을 발행하며, 가장 많은 영역을 통제하기 위해 경쟁합니다. 플랫폼은 게임 서버, 지도 파서, 시각화 도구를 포함하며, 개발자는 로컬에서 테스트하고, 휴리스틱을 조정하며, 성능을 최적화하고, 온라인 리더보드에 제출할 수 있습니다. 시스템은 반복적인 봇 개선, 다중 에이전트 협력, 전략 연구를 표준화된 환경에서 지원합니다.

Pits and Orbs는 Python으로 구현된 오픈소스 강화 학습 환경으로, 에이전트가 목표를 추구하고 환경 위험에 직면하는 턴 기반 다중 에이전트 그리드 월드를 제공합니다. 각 에이전트는 사용자 정의 가능한 격자를 탐색하며, 페널티를 부여하거나 에피소드를 종료하는 무작위로 배치된 함정을 피하고, 긍정적인 보상을 위해 구슬을 모아야 합니다. 이 환경은 경쟁 모드와 협력 모드를 모두 지원하며, 연구자들이 다양한 학습 시나리오를 탐구할 수 있게 합니다. 간단한 API는 Stable Baselines 또는 RLlib과 같은 인기 RL 라이브러리와 원활하게 통합됩니다. 주요 기능으로는 조정 가능한 격자 크기, 동적 함정 및 구슬 분포, 구성 가능한 보상 구조, 그리고 훈련 분석을 위한 선택적 로깅이 포함됩니다.