Halite II é uma estrutura de desafio de código aberto que hospeda partidas de estratégia por turnos entre bots escritos pelos usuários. A cada rodada, os agentes recebem um estado do mapa, enviam comandos de movimento e ataque, e competem para controlar o maior território. A plataforma inclui um servidor de jogos, parser de mapas e ferramenta de visualização. Desenvolvedores podem testar localmente, refinar heurísticas, otimizar desempenho sob restrição de tempo e enviar para uma tabela de classificação online. O sistema suporta melhorias iterativas do bot, cooperação multi-agentes e pesquisa de estratégias personalizadas em um ambiente padronizado.

Pits and Orbs é um ambiente de aprendizado por reforço de código aberto implementado em Python, oferecendo um mundo em grade multi-agente baseado em turnos onde os agentes perseguem objetivos e enfrentam perigos ambientais. Cada agente deve navegar por uma grade personalizável, evitar poços colocados aleatoriamente que penalizam ou encerram episódios, e coletar orbes para recompensas positivas. O ambiente suporta modos competitivos e cooperativos, permitindo aos pesquisadores explorar cenários de aprendizado variados. Sua API simples se integra facilmente com bibliotecas populares de RL, como Stable Baselines ou RLlib. Recursos principais incluem dimensões ajustáveis da grade, distribuições dinâmicas de poços e orbes, estruturas de recompensa configuráveis e registro opcional para análise de treinamento.