MARL-DPP é uma estrutura de código aberto que permite aprendizado por reforço multiagente (MARL) com diversidade garantida através de Processos de Pontos Determinantes (DPP). Abordagens tradicionais de MARL frequentemente sofrem de convergência de políticas para comportamentos semelhantes; MARL-DPP aborda isso incorporando medidas baseadas em DPP para encorajar os agentes a manter distribuições de ações diversas. O kit de ferramentas fornece código modular para incorporar DPP nos objetivos de treinamento, amostragem de políticas e gerenciamento de exploração. Inclui integração pronta para uso com ambientes padrão do OpenAI Gym e do Ambiente de Partículas Multiagente (MPE), além de utilitários para gerenciamento de hiperparâmetros, registro e visualização de métricas de diversidade. Pesquisadores podem avaliar o impacto de restrições de diversidade em tarefas cooperativas, alocação de recursos e jogos competitivos. O design extensível suporta ambientes personalizados e algoritmos avançados, facilitando a exploração de variantes do MARL-DPP.

Multi-Agent Miners oferece um ambiente de mundo em grade onde múltiplos agentes mineradores autônomos navegam, cavando e coletando recursos enquanto interagem entre si. Suporta tamanhos de mapa configuráveis, contagem de agentes e estruturas de recompensa, permitindo criar cenários competitivos ou cooperativos. O framework integra-se com bibliotecas populares de RL via PettingZoo, fornecendo APIs padronizadas para funções de reset, passo e renderização. Modos de visualização e suporte à registro ajudam na análise de comportamentos e resultados, tornando-o ideal para pesquisa, educação e avaliação de algoritmos em aprendizado por reforço multiagente.

Este repositório fornece um conjunto completo de algoritmos de aprendizado por reforço multiagente—incluindo MADDPG, DDPG, PPO e outros—integrados com benchmarks padrão como o Multi-Agent Particle Environment e OpenAI Gym. Possui wrappers de ambiente personalizáveis, scripts de treinamento configuráveis, registro de logs em tempo real e métricas de avaliação de desempenho. Os usuários podem facilmente estender algoritmos, adaptar para tarefas personalizadas e comparar políticas em configurações cooperativas e adversariais com configuração mínima.

MADDPG escalável é uma estrutura orientada à pesquisa para aprendizado por reforço multiagente, oferecendo uma implementação escalável do algoritmo MADDPG. Possui críticos centralizados durante o treinamento e atores independentes em tempo de execução para estabilidade e eficiência. A biblioteca inclui scripts Python para definir ambientes personalizados, configurar arquiteturas de rede e ajustar hiperparâmetros. Os usuários podem treinar múltiplos agentes em paralelo, monitorar métricas e visualizar curvas de aprendizado. Integra-se com ambientes semelhantes ao OpenAI Gym e suporta aceleração GPU via TensorFlow. Ao fornecer componentes modulares, o MADDPG escalável permite experimentações flexíveis em tarefas multiagente cooperativas, competitivas ou mistas, facilitando prototipagem rápida e benchmarking.

AutoDRIVE Cooperative MARL é uma estrutura hospedada no GitHub que combina o simulador de condução urbana AutoDRIVE com algoritmos adaptáveis de aprendizado por reforço multiagente. Inclui scripts de treinamento, wrappers de ambiente, métricas de avaliação e ferramentas de visualização para desenvolver e testar políticas de condução cooperativa. Os usuários podem configurar os espaços de observação dos agentes, funções de recompensa e hiperparâmetros de treinamento. O repositório suporta extensões modulares, permitindo definições personalizadas de tarefas, aprendizagem por currículo e acompanhamento de desempenho para pesquisas em coordenação de veículos autônomos.

DeepMind MAS Environment é uma biblioteca Python que fornece uma interface padronizada para construir e simular tarefas de aprendizado por reforço multiagente. Permite configurar o número de agentes, definir espaços de observação e ação, e personalizar estruturas de recompensa. A estrutura suporta canais de comunicação entre agentes, registro de desempenho e capacidades de renderização. Pesquisadores podem integrar facilmente o DeepMind MAS Environment com bibliotecas populares de RL, como TensorFlow e PyTorch, para avaliar novos algoritmos, testar protocolos de comunicação e analisar domínios de controle discretos e contínuos.

MADDPG-Keras oferece uma estrutura completa para pesquisa em aprendizado por reforço multiagente ao implementar o algoritmo MADDPG em Keras. Suporta espaços de ação contínuos, múltiplos agentes e ambientes padrão do OpenAI Gym. Pesquisadores e desenvolvedores podem configurar arquiteturas de redes neurais, hiperparâmetros de treinamento e funções de recompensa, iniciando experimentos com registros integrados e checkpointing de modelos para acelerar o aprendizado de políticas multiagente e benchmarking.

Selective Reincarnation introduz um mecanismo de treinamento dinâmico baseado em população, adaptado ao MARL. O desempenho de cada agente é avaliado regularmente em relação a limites predefinidos. Quando o desempenho de um agente cai abaixo de seus pares, seus pesos são redefinidos para os do agente com melhor desempenho atual, reencarnando-o com comportamentos comprovados. Essa abordagem mantém a diversidade ao redefinir apenas os menos eficazes, minimizando redefinições destrutivas enquanto direciona a exploração para políticas de alta recompensa. Permitindo herança direcionada de parâmetros de redes neurais, a plataforma reduz a variância e acelera a convergência em ambientes cooperativos ou competitivos. Compatível com qualquer algoritmo MARL baseado em gradiente de política, a implementação se integra facilmente aos fluxos de trabalho baseados em PyTorch e inclui hiperparâmetros configuráveis para frequência de avaliação, critérios de seleção e ajuste de estratégias de redefinição.

CrewAI-Learning é uma biblioteca de código aberto projetada para agilizar projetos de aprendizagem por reforço multiagente. Oferece estruturas de ambiente, definições modulares de agentes, funções de recompensa personalizáveis e um conjunto de algoritmos embutidos como DQN, PPO e A3C adaptados para tarefas colaborativas. Usuários podem definir cenários, gerenciar ciclos de treino, registrar métricas e visualizar resultados. O framework suporta configuração dinâmica de equipes de agentes e estratégias de compartilhamento de recompensas, facilitando o prototipagem, avaliação e otimização de soluções de IA cooperativa em várias áreas.