O MARL Simulator foi projetado para facilitar o desenvolvimento eficiente e escalável de algoritmos de aprendizagem por reforço multiagente (MARL). Aproveitando o backend distribuído do PyTorch, permite que os usuários executem treinamentos paralelos em várias GPUs ou nós, reduzindo significativamente o tempo de experimentação. O simulador oferece uma interface de ambiente modular que suporta cenários padrão de referência — como navegação cooperativa, predador-vítima e mundo em grade — bem como ambientes personalizados definidos pelo usuário. Os agentes podem usar vários protocolos de comunicação para coordenar ações, compartilhar observações e sincronizar recompensas. Espaços de recompensa e observação configuráveis permitem um controle detalhado sobre a dinâmica de treinamento, enquanto ferramentas integradas de registro e visualização fornecem insights em tempo real sobre métricas de desempenho.

Agentes de Aprendizado por Reforço para Jogos PettingZoo é uma biblioteca de código Python que entrega algoritmos prontos de DQN, PPO e A2C para aprendizado por reforço multiagente nos ambientes PettingZoo. Possui scripts padronizados de treinamento e avaliação, hiperparâmetros configuráveis, registro integrado no TensorBoard e suporte tanto para jogos competitivos quanto cooperativos. Pesquisadores e desenvolvedores podem clonar o repositório, ajustar os parâmetros do ambiente e do algoritmo, executar sessões de treinamento e visualizar métricas para avaliar e iterar rapidamente suas experiências em RL multiagente.