Pits and OrbsはPythonで実装されたオープンソースの強化学習環境で、ターン制のマルチエージェントグリッドワールドを提供します。エージェントは目標を追求し、危険な環境要素に直面します。各エージェントは設定可能なグリッド上をナビゲートし、ランダムに配置された落とし穴を避けてエピソードをペナルティ化または終了させ、ポジティブな報酬のためにオーブを収集します。この環境は競争モードと協力モードの両方をサポートし、研究者はさまざまな学習シナリオを探索できます。簡単なAPIはStable BaselinesやRLlibなどの人気RLライブラリにシームレスに統合可能です。主な特徴は、調整可能なグリッド寸法、ダイナミックな落とし穴とオーブの分布、設定可能な報酬構造、および訓練分析用のオプションログ記録です。

Java-Action-Storageは、エージェント行動のエンドツーエンドの永続性を扱うために設計されたLightJasonマルチエージェントフレームワークのコアコンポーネントです。一般的なActionStorageインターフェースを定義し、一般的なデータベースやファイルシステム用のアダプターを備え、非同期およびバッチ書き込みをサポートし、複数のエージェントからの同時アクセスを管理します。ユーザーはストレージ戦略を設定し、履歴アクションログをクエリし、シーケンスをリプレイしてシステムの動作を監査したり、障害後にエージェントの状態を復元したりすることができます。このモジュールは、簡単な依存性注入を介して統合され、JavaベースのAIプロジェクトへの迅速な導入を可能にします。