CybMASDE permite que pesquisadores e desenvolvedores construam, configurem e executem simulações de múltiplos agentes com aprendizado por reforço profundo. Os usuários podem criar cenários personalizados, definir papéis de agentes e funções de recompensa, além de integrar algoritmos de RL padrão ou personalizados. A estrutura inclui servidores de ambientes, interfaces de agentes em rede, coletores de dados e utilitários de renderização. Suporta treinamento paralelo, monitoramento em tempo real e salvamento de modelos. A arquitetura modular do CybMASDE possibilita a integração fluida de novos agentes, espaços de observação e estratégias de treinamento, acelerando experimentos em controle cooperativo, comportamento de enxame, alocação de recursos e outros casos de uso multi-agente.

Esta estrutura de código aberto combina a biblioteca de modelagem de agentes AgentSimJs com o motor gráfico 3D do Three.js para fornecer simulações multiagentes interativas baseadas no navegador. Os usuários podem definir tipos de agentes, comportamentos e regras ambientais, configurar detecção de colisões e gerenciamento de eventos, e visualizar simulações em tempo real com opções de renderização personalizáveis. A biblioteca suporta controles dinâmicos, gerenciamento de cenas e ajuste de desempenho, tornando-a ideal para pesquisa, educação e prototipagem de cenários complexos baseados em agentes.

Pits and Orbs é um ambiente de aprendizado por reforço de código aberto implementado em Python, oferecendo um mundo em grade multi-agente baseado em turnos onde os agentes perseguem objetivos e enfrentam perigos ambientais. Cada agente deve navegar por uma grade personalizável, evitar poços colocados aleatoriamente que penalizam ou encerram episódios, e coletar orbes para recompensas positivas. O ambiente suporta modos competitivos e cooperativos, permitindo aos pesquisadores explorar cenários de aprendizado variados. Sua API simples se integra facilmente com bibliotecas populares de RL, como Stable Baselines ou RLlib. Recursos principais incluem dimensões ajustáveis da grade, distribuições dinâmicas de poços e orbes, estruturas de recompensa configuráveis e registro opcional para análise de treinamento.