Halite IIは、ユーザー作成のボット間でターン制戦略マッチを開催するオープンソースのチャレンジフレームワークです。各ターン、エージェントはマップの状態を受信し、移動や攻撃のコマンドを発行し、最も多くの領域を制御するために競います。プラットフォームにはゲームサーバー、マップパーサ、ビジュアライゼーションツールが含まれ、開発者はローカルでテストし、ヒューリスティックを調整し、パフォーマンスを最適化し、オンラインリーダーボードに提出できます。システムは反復的なボットの改善、多エージェント協力、戦略研究を標準化された環境でサポートします。

Pits and OrbsはPythonで実装されたオープンソースの強化学習環境で、ターン制のマルチエージェントグリッドワールドを提供します。エージェントは目標を追求し、危険な環境要素に直面します。各エージェントは設定可能なグリッド上をナビゲートし、ランダムに配置された落とし穴を避けてエピソードをペナルティ化または終了させ、ポジティブな報酬のためにオーブを収集します。この環境は競争モードと協力モードの両方をサポートし、研究者はさまざまな学習シナリオを探索できます。簡単なAPIはStable BaselinesやRLlibなどの人気RLライブラリにシームレスに統合可能です。主な特徴は、調整可能なグリッド寸法、ダイナミックな落とし穴とオーブの分布、設定可能な報酬構造、および訓練分析用のオプションログ記録です。