VacuumWorld é uma plataforma de simulação de código aberto projetada para facilitar o desenvolvimento e avaliação de algoritmos de aprendizagem por reforço multiagente. Oferece ambientes baseados em grade onde os agentes de limpeza de vácuo virtuais operam para detectar e remover manchas de sujeira em layouts personalizáveis. Os usuários podem ajustar parâmetros como tamanho da grade, distribuição de sujeira, ruído de movimento estocástico e estruturas de recompensa para modelar cenários diversos. A estrutura inclui suporte integrado para protocolos de comunicação de agentes, painéis de visualização em tempo real e utilitários de logging para rastreamento de desempenho. Com APIs simples em Python, pesquisadores podem integrar rapidamente seus algoritmos de RL, comparar estratégias cooperativas ou competitivas e conduzir experimentos reprodutíveis, tornando VacuumWorld ideal para pesquisa acadêmica e ensino.

MADDPG escalável é uma estrutura orientada à pesquisa para aprendizado por reforço multiagente, oferecendo uma implementação escalável do algoritmo MADDPG. Possui críticos centralizados durante o treinamento e atores independentes em tempo de execução para estabilidade e eficiência. A biblioteca inclui scripts Python para definir ambientes personalizados, configurar arquiteturas de rede e ajustar hiperparâmetros. Os usuários podem treinar múltiplos agentes em paralelo, monitorar métricas e visualizar curvas de aprendizado. Integra-se com ambientes semelhantes ao OpenAI Gym e suporta aceleração GPU via TensorFlow. Ao fornecer componentes modulares, o MADDPG escalável permite experimentações flexíveis em tarefas multiagente cooperativas, competitivas ou mistas, facilitando prototipagem rápida e benchmarking.