MAPF_G2RLは、グラフ理論と深層強化学習を橋渡しし、マルチエージェント経路探索（MAPF）問題に取り組むオープンソースの研究フレームワークです。ノードとエッジをベクトル表現にエンコードし、空間的かつ衝突認識型の報酬関数を定義し、DQN、PPO、A2CなどのさまざまなRLアルゴリズムをサポートします。このフレームワークは、ランダムなグラフを生成したり、実世界の地図をインポートしてシナリオを自動作成し、複数のエージェントのポリシーを最適化する訓練ループを調整します。学習後、エージェントはシミュレーション環境で評価され、経路の最適性、所要時間、成功率を測定します。そのモジュール化設計により、研究者はコアコンポーネントを拡張し、新しいMARL手法を統合し、従来のソルバーと比較評価することができます。

Mavaは、マルチエージェント強化学習システムの開発、訓練、評価のためのJAXベースのオープンソースライブラリです。 MAPPOやMADDPGなどの協調・競合アルゴリズムをあらかじめ実装し、単一ノードや分散ワークフローをサポートする設定可能なトレーニングループを備えています。研究者はPettingZooから環境をインポートしたり、カスタム環境を定義したりして、政策最適化、リプレイバッファ管理、指標ロギングのためのモジュールを利用できます。フレームワークの柔軟な設計により、新しいアルゴリズムやカスタム観測空間、報酬構造のシームレスな統合が可能です。JAXの自動ベクトル化とハードウェア加速機能を活用し、効率的な大規模実験と、多様なマルチエージェントシナリオでの再現性のあるベンチマークを保証します。