Gym-Recsys é uma caixa de ferramentas que encapsula tarefas de recomendação em ambientes OpenAI Gym, permitindo que algoritmos de aprendizagem por reforço interajam de forma passo a passo com matrizes simuladas de usuário-item. Fornece geradores de comportamento de usuário sintéticos, suporta carregamento de conjuntos de dados populares e fornece métricas padrão de recomendação, como Precision@K e NDCG. Os usuários podem personalizar funções de recompensa, modelos de usuário e pools de itens para experimentar diferentes estratégias de recomendação baseadas em RL de forma reproduzível.

VacuumWorld é uma plataforma de simulação de código aberto projetada para facilitar o desenvolvimento e avaliação de algoritmos de aprendizagem por reforço multiagente. Oferece ambientes baseados em grade onde os agentes de limpeza de vácuo virtuais operam para detectar e remover manchas de sujeira em layouts personalizáveis. Os usuários podem ajustar parâmetros como tamanho da grade, distribuição de sujeira, ruído de movimento estocástico e estruturas de recompensa para modelar cenários diversos. A estrutura inclui suporte integrado para protocolos de comunicação de agentes, painéis de visualização em tempo real e utilitários de logging para rastreamento de desempenho. Com APIs simples em Python, pesquisadores podem integrar rapidamente seus algoritmos de RL, comparar estratégias cooperativas ou competitivas e conduzir experimentos reprodutíveis, tornando VacuumWorld ideal para pesquisa acadêmica e ensino.