O MultiAgentSystems foi projetado para simplificar o processo de construção e avaliação de aplicações de aprendizado por reforço multiagente (MARL). A plataforma inclui implementações de algoritmos de ponta como MADDPG, QMIX, VDN e treinamento centralizado com execução descentralizada. Possui wrappers de ambiente modulares compatíveis com OpenAI Gym, protocolos de comunicação para interação entre agentes e utilitários de registro para rastrear métricas como modelagem de recompensas e taxas de convergência. Pesquisadores podem personalizar arquiteturas de agentes, ajustar hiperparâmetros e simular configurações como navegação cooperativa, alocação de recursos e jogos adversariais. Com suporte integrado para PyTorch, aceleração por GPU e integração com TensorBoard, o MultiAgentSystems acelera experimentação e benchmarking em domínios colaborativos e competitivos de múltiplos agentes.

A Shepherding é uma estrutura de simulação de código aberto projetada para pesquisadores e desenvolvedores de aprendizado por reforço estudarem e implementarem tarefas de pastoreio multiagente. Oferece um ambiente compatível com Gym onde agentes podem ser treinados para desempenhar comportamentos como flanquear, coletar e dispersar grupos-alvo em espaços contínuos ou discretos. A estrutura inclui funções modulares de formação de recompensa, parametrização do ambiente e utilitários de registro para monitorar o desempenho de treinamento. Os usuários podem definir obstáculos, populações dinâmicas de agentes e políticas personalizadas usando TensorFlow ou PyTorch. Scripts de visualização geram gráficos de trajetórias e gravações de vídeo das interações dos agentes. O design modular do Shepherding permite integração perfeita com bibliotecas de RL existentes, possibilitando experimentos reprodutíveis, benchmark de novas estratégias de coordenação e prototipagem rápida de soluções de pastoreio impulsionadas por IA.