Gym-Recsys est une boîte à outils qui encapsule des tâches de recommandation dans des environnements OpenAI Gym, permettant aux algorithmes d'apprentissage par renforcement d'interagir étape par étape avec des matrices utilisateur-élément simulées. Il fournit des générateurs de comportements utilisateur synthétiques, supporte le chargement de datasets populaires et livre des métriques standard comme Precision@K et NDCG. Les utilisateurs peuvent personnaliser les fonctions de récompense, les modèles utilisateur et les pools d’objets pour expérimenter différentes stratégies de recommandation RL de manière reproductible.

VacuumWorld est une plateforme de simulation open-source conçue pour faciliter le développement et l'évaluation d'algorithmes d'apprentissage par renforcement multi-agents. Elle fournit des environnements basés sur une grille où des agents aspirateurs virtuels opèrent pour détecter et éliminer la saleté dans différents agencements personnalisables. Les utilisateurs peuvent ajuster des paramètres tels que la taille de la grille, la distribution de la saleté, le bruit de mouvement stochastique et les structures de récompense pour modéliser divers scénarios. Le cadre inclut un support intégré pour les protocoles de communication entre agents, des tableaux de visualisation en temps réel et des utilitaires de journalisation pour le suivi des performances. Avec des API Python simples, les chercheurs peuvent rapidement intégrer leurs algorithmes RL, comparer des stratégies coopératives ou compétitives, et réaliser des expériences reproductibles, rendant VacuumWorld idéal pour la recherche académique et l'enseignement.