MAPF_G2RLは、グラフ理論と深層強化学習を橋渡しし、マルチエージェント経路探索（MAPF）問題に取り組むオープンソースの研究フレームワークです。ノードとエッジをベクトル表現にエンコードし、空間的かつ衝突認識型の報酬関数を定義し、DQN、PPO、A2CなどのさまざまなRLアルゴリズムをサポートします。このフレームワークは、ランダムなグラフを生成したり、実世界の地図をインポートしてシナリオを自動作成し、複数のエージェントのポリシーを最適化する訓練ループを調整します。学習後、エージェントはシミュレーション環境で評価され、経路の最適性、所要時間、成功率を測定します。そのモジュール化設計により、研究者はコアコンポーネントを拡張し、新しいMARL手法を統合し、従来のソルバーと比較評価することができます。

gym-fxは、OpenAI Gymインターフェースを使用したシミュレートされた外国為替取引環境を実装したオープンソースのPythonライブラリです。複数の通貨ペアのサポート、歴史的価格フィードの統合、技術指標、および完全にカスタマイズ可能な報酬関数を提供します。標準化されたAPIを通じて、algorithmsのベンチマークや開発を容易にします。ユーザーは、市場のスリッページや取引コスト、観測空間を設定して、実取引に近いシナリオを模擬し、堅牢な戦略開発と評価を促進します。