このオープンソースプロジェクトは、PyTorchとUnity ML-Agentsを基盤とした完全な多エージェント強化学習フレームワークを提供します。分散型DDPGアルゴリズム、環境ラッパー、訓練スクリプトを含みます。ユーザーはエージェントのポリシー、批評ネットワーク、リプレイバッファー、並列訓練ワーカーを設定できます。ロギングフックによりTensorBoardでの監視が可能で、モジュラーコードはカスタム報酬関数や環境パラメータをサポートします。リポジトリには協力ナビゲーションタスクを示すサンプルUnityシーンが含まれ、シミュレーション内での多エージェントシナリオの拡張やベンチマークに最適です。

MultiAgent-Systems-StarCraft2-PySC2-Rawは、StarCraft IIで複数のAIエージェントを開発、訓練、評価するための完全なツールキットを提供します。ユニットの移動やターゲット指定、能力制御の低レベルコントロールを公開し、柔軟な報酬設計とシナリオ構成を可能にします。ユーザーはカスタムニューラルネットワークアーキテクチャを簡単に組み込み、チーム間の協調戦略を定義し、メトリクスを記録できます。PySC2上に構築されており、並列訓練、チェックポイント作成、可視化をサポートし、協調型・対抗型のマルチエージェント強化学習の研究を進めるのに理想的です。

スケーラブルMADDPGは、研究指向のマルチエージェント強化学習フレームワークであり、MADDPGアルゴリズムのスケーラブルな実装を提供します。訓練中は集中批評家、実行時は独立したアクターを特徴とし、安定性と効率性を高めています。このライブラリには、カスタム環境の定義、ネットワークアーキテクチャの設定、ハイパーパラメータの調整用のPythonスクリプトが含まれます。ユーザは複数のエージェントを並列して訓練し、指標を監視し、学習曲線を可視化できます。また、OpenAI Gymに似た環境とGPUアクセラレーション（TensorFlowサポート）もサポートしており、モジュール式コンポーネントにより、協力、競争、または混合のマルチエージェントタスクに対して柔軟な実験と迅速な試作、ベンチマークを可能にします。