Halite II es un marco de desafíos de código abierto que organiza partidas de estrategia por turnos entre bots escritos por usuarios. En cada turno, los agentes reciben un estado del mapa, emiten órdenes de movimiento y ataque, y compiten por controlar la mayor cantidad de territorio. La plataforma incluye un servidor de juegos, un analizador de mapas y una herramienta de visualización. Los desarrolladores pueden probar localmente, refinar heurísticas, optimizar el rendimiento bajo restricciones de tiempo y enviar sus bots a una tabla de clasificación en línea. El sistema soporta mejoras iterativas de bots, cooperación multi-agente y búsqueda de estrategias en un entorno estandarizado.

Pits and Orbs es un entorno de código abierto para aprendizaje por refuerzo, implementado en Python, que ofrece un mundo en una cuadrícula multi-agente por turnos donde los agentes persiguen objetivos y enfrentan peligros ambientales. Cada agente debe navegar en una cuadrícula ajustable, evitar trampas colocadas aleatoriamente que penalizan o terminan episodios, y recolectar orbes para recompensas positivas. El entorno soporta modos competitivos y cooperativos, permitiendo a investigadores explorar diversos escenarios de aprendizaje. Su API simple se integra perfectamente con bibliotecas RL populares como Stable Baselines o RLlib. Características principales incluyen dimensiones de cuadrícula ajustables, distribuciones dinámicas de trampas y orbes, estructuras de recompensa configurables y registro opcional para análisis del entrenamiento.