MAPF_G2RLは、グラフ理論と深層強化学習を橋渡しし、マルチエージェント経路探索（MAPF）問題に取り組むオープンソースの研究フレームワークです。ノードとエッジをベクトル表現にエンコードし、空間的かつ衝突認識型の報酬関数を定義し、DQN、PPO、A2CなどのさまざまなRLアルゴリズムをサポートします。このフレームワークは、ランダムなグラフを生成したり、実世界の地図をインポートしてシナリオを自動作成し、複数のエージェントのポリシーを最適化する訓練ループを調整します。学習後、エージェントはシミュレーション環境で評価され、経路の最適性、所要時間、成功率を測定します。そのモジュール化設計により、研究者はコアコンポーネントを拡張し、新しいMARL手法を統合し、従来のソルバーと比較評価することができます。

MADDPG-Kerasは、Kerasに実装されたMADDPGアルゴリズムを用いて、マルチエージェント強化学習の研究のための包括的なフレームワークを提供します。連続アクション空間、複数のエージェント、OpenAI Gymの標準環境をサポートします。研究者と開発者は、ニューラルネットワークのアーキテクチャ、トレーニングのハイパーパラメータ、報酬関数を設定し、組み込みのロギングとモデルのチェックポイント保存機能を使って実験を実行し、マルチエージェントのポリシー学習と比較を高速化できます。