gym-multigridは、複数部屋のナビゲーションと探索タスクのために設計されたカスタマイズ可能なグリッドワールド環境のセットを提供します。各環境は、オブジェクト、鍵、ドア、障害物で構成された連結された部屋で構成されます。ユーザーはプログラムでグリッドサイズ、部屋の構成、オブジェクトの配置を調整できます。ライブラリは完全および部分観測モードをサポートし、RGBまたはマトリクスの状態表現を提供します。アクションには移動、オブジェクトとのインタラクション、ドア操作が含まれます。Gym環境として統合することで、研究者は任意のGym互換エージェントを活用して、キーとドアのパズル、オブジェクトの取得、階層的計画といったタスクのトレーニングと評価をシームレスに行うことができます。gym-multigridはモジュラー設計と最小限の依存関係により、新しいAI戦略のベンチマークに最適です。

NavGround Learningは、ナビゲーションタスクにおいて強化学習エージェントの開発とベンチマークを行うための総合ツールキットを提供します。マルチエージェントシミュレーション、衝突モデル化、カスタマイズ可能なセンサーとアクチュエータをサポートします。事前定義されたポリシーテンプレートから選択するか、カスタムアーキテクチャを実装して、最先端のRLアルゴリズムで訓練し、パフォーマンス指標を可視化できます。OpenAI GymやStable Baselines3との連携により、実験の管理が容易になり、内蔵されたロギングとビジュアライゼーションツールでエージェントの挙動や訓練のダイナミクスを詳細に分析できます。

CommNetは、複数のエージェントが各タイムステップで隠れ状態を共有し、協力環境でアクションを調整することを可能にする研究志向のライブラリです。PyTorchによるモデル定義、学習および評価スクリプト、OpenAI Gym用環境ラッパー、通信チャネル、エージェント数、ネットワーク深度のカスタマイズに役立つユーティリティを含みます。研究者や開発者は、ナビゲーション、追跡・回避、リソース収集タスクにおいて、エージェント間の通信戦略のプロトタイピングとベンチマークにCommNetを活用できます。