Gym-Recsysは、推奨タスクをOpenAI Gym環境にラップするツールボックスで、強化学習アルゴリズムがシミュレートされたユーザーアイテム行列とステップバイステップで対話できるようにします。合成ユーザ行動生成器を提供し、一般的なデータセットの読み込みをサポートし、Precision@KやNDCGなどの標準的な推奨指標を提供します。ユーザは報酬関数、ユーザモデル、アイテムプールをカスタマイズして、異なるRLベースの推奨戦略を再現性を持って実験できます。

VacuumWorldは、マルチエージェント強化学習アルゴリズムの開発と評価を促進するためのオープンソースのシミュレーションプラットフォームです。仮想の掃除機エージェントが動作して汚れのパッチを検出・除去するグリッドベースの環境を提供し、レイアウトのカスタマイズやパラメータ調整が可能です。内部にはエージェント通信プロトコルやリアルタイムビジュアライゼーションダッシュボード、性能追跡用ログツールも用意されています。シンプルなPython APIを使えば、研究者はRLアルゴリズムを迅速に統合し、協力または競争戦略の比較や再現性のある実験が行えます。学術研究や教育向けに最適です。