Mavaは、マルチエージェント強化学習システムの開発、訓練、評価のためのJAXベースのオープンソースライブラリです。 MAPPOやMADDPGなどの協調・競合アルゴリズムをあらかじめ実装し、単一ノードや分散ワークフローをサポートする設定可能なトレーニングループを備えています。研究者はPettingZooから環境をインポートしたり、カスタム環境を定義したりして、政策最適化、リプレイバッファ管理、指標ロギングのためのモジュールを利用できます。フレームワークの柔軟な設計により、新しいアルゴリズムやカスタム観測空間、報酬構造のシームレスな統合が可能です。JAXの自動ベクトル化とハードウェア加速機能を活用し、効率的な大規模実験と、多様なマルチエージェントシナリオでの再現性のあるベンチマークを保証します。

Dino Reinforcement Learningは、強化学習を通じてChromeの恐竜ゲームをプレイするAIエージェントの訓練に必要なツールキットを提供します。Seleniumを介してヘッドレスChromeインスタンスと連携し、リアルタイムのゲームフレームをキャプチャして深層Qネットワークの入力に最適化された状態表現に処理します。フレームリプレイ、イプシロン貪欲探索、畳み込みニューラルネットワークモデル、カスタマイズ可能なハイパーパラメータを持つトレーニングループなどのモジュールが含まれます。トレーニング進行状況はコンソールログで確認でき、チェックポイントを保存して後で評価できます。トレーニング後、エージェントは自律的にライブゲームをプレイしたり、異なるモデルアーキテクチャと比較評価したりできます。モジュール設計により、異なるRLアルゴリズムへの置き換えも容易です。