MAGAILは、生成的敵対的模倣学習のマルチエージェント拡張を実装し、エージェントのグループが専門家のデモから協調動作を学習できるようにします。Pythonで構築されており、PyTorch（またはTensorFlowのバリアント）をサポートし、政策（ジェネレーター）とディスクリミネーターのモジュールから構成され、敵対的ループで訓練されます。エージェントは、OpenAIマルチエージェントパーティクル環境やPettingZooのような環境で軌跡を生成し、ディスクリミネーターがそれらを専門家のデータに照らして真偽を評価します。反復的な更新により、政策ネットワークは明示的な報酬関数なしで専門家に似た戦略に収束します。MAGAILのモジュラー設計は、ネットワークアーキテクチャ、専門家データの入力、環境統合、訓練ハイパーパラメータのカスタマイズを可能にします。さらに、標準搭載のログ記録とTensorBoardの可視化により、マルチエージェント学習の進捗とパフォーマンスの監視と分析を促進します。

HMASは、階層型マルチエージェントシステムの開発を可能にするオープンソースのPythonフレームワークです。エージェント階層の定義、相互通信プロトコル、環境との連携、ビルトイン訓練ループの抽象化を提供します。研究者や開発者は、HMASを使用して複雑なエージェント間の相互作用のプロトタイピング、協調ポリシーの訓練、シミュレーション環境でのパフォーマンス評価を行えます。そのモジュール式設計により、エージェント、環境、訓練戦略の拡張とカスタマイズが容易です。