Vanilla Agents é uma estrutura leve baseada em PyTorch que fornece implementações modulares e extensíveis de agentes de reforço fundamentais. Suporta algoritmos como DQN, Double DQN, PPO e A2C, com wrappers de ambiente plugáveis compatíveis com OpenAI Gym. Os usuários podem configurar hiperparâmetros, registrar métricas de treinamento, salvar pontos de verificação e visualizar curvas de aprendizagem. A base de código é organizada para clareza, tornando-a ideal para prototipagem de pesquisa, uso educacional e benchmarking de novas ideias em RL.

mini-AlphaStar revela a arquitetura complexa do AlphaStar ao fornecer uma estrutura acadêmica, de código aberto, em PyTorch para desenvolvimento de IA em StarCraft II. Inclui codificadores de características espaciais para entradas de tela e minimapa, processamento de características não espaciais, módulos de memória LSTM e redes separadas de política e valor para seleção de ações e avaliação de estados. Utiliza aprendizagem por imitação para bootstrap e reforço com autojogo para ajuste fino, suportando wrappers de ambiente compatíveis com StarCraft II via pysc2, registro via TensorBoard e hiperparâmetros configuráveis. Pesquisadores e estudantes podem gerar conjuntos de dados de jogos humanos, treinar modelos em cenários personalizados, avaliar o desempenho do agente e visualizar curvas de aprendizado. A estrutura modular permite experimentação fácil com variantes de rede, cronogramas de treinamento e configurações multiagentes. Destinado à educação e prototipagem, não para implantação em produção.

MADDPG escalável é uma estrutura orientada à pesquisa para aprendizado por reforço multiagente, oferecendo uma implementação escalável do algoritmo MADDPG. Possui críticos centralizados durante o treinamento e atores independentes em tempo de execução para estabilidade e eficiência. A biblioteca inclui scripts Python para definir ambientes personalizados, configurar arquiteturas de rede e ajustar hiperparâmetros. Os usuários podem treinar múltiplos agentes em paralelo, monitorar métricas e visualizar curvas de aprendizado. Integra-se com ambientes semelhantes ao OpenAI Gym e suporta aceleração GPU via TensorFlow. Ao fornecer componentes modulares, o MADDPG escalável permite experimentações flexíveis em tarefas multiagente cooperativas, competitivas ou mistas, facilitando prototipagem rápida e benchmarking.