Dino Reinforcement Learningは、強化学習を通じてChromeの恐竜ゲームをプレイするAIエージェントの訓練に必要なツールキットを提供します。Seleniumを介してヘッドレスChromeインスタンスと連携し、リアルタイムのゲームフレームをキャプチャして深層Qネットワークの入力に最適化された状態表現に処理します。フレームリプレイ、イプシロン貪欲探索、畳み込みニューラルネットワークモデル、カスタマイズ可能なハイパーパラメータを持つトレーニングループなどのモジュールが含まれます。トレーニング進行状況はコンソールログで確認でき、チェックポイントを保存して後で評価できます。トレーニング後、エージェントは自律的にライブゲームをプレイしたり、異なるモデルアーキテクチャと比較評価したりできます。モジュール設計により、異なるRLアルゴリズムへの置き換えも容易です。

Selective Reincarnationは、マルチエージェント強化学習に特化したダイナミックな集団ベースのトレーニングメカニズムを導入します。各エージェントのパフォーマンスは、事前に定められた閾値と定期的に評価されます。エージェントのパフォーマンスが閾値を下回る場合、その重みは現在の最高パフォーマーの重みにリセットされ、実績のある行動を再現します。この方法は、パフォーマンスが低いエージェントのみをリセットすることで多様性を維持し、破壊的なリセットを最小限に抑えつつ、高報酬ポリシーへの探索を導きます。ニューラルネットワークパラメータのターゲットヘリテージ（選択的継承）を可能にすることで、バリアンスを低減し、協力型や競争型の環境での収束を促進します。PyTorchベースのアルゴリズムとシームレスに連携し、評価頻度、選択基準、リセット戦略の調整可能なハイパーパラメータを含みます。