Halite II — это открытый фреймворк соревнований, который проводит пошаговые стратегические матчи между пользователями, написавшими своих ботов. В каждом ходе агенты получают состояние карты, посылают команды перемещения и атаки, и борются за контроль наибольшей территории. Платформа включает игровой сервер, парсер карт и инструмент визуализации. Разработчики могут тестировать локально, дорабатывать эвристики, оптимизировать производительность под временные ограничения и публиковать ботов в онлайн-листинг. Система поддерживает итеративное улучшение ботов, сотрудничество мультиигроков и разработку стратегий в стандартизированной среде.

Pits and Orbs — это открытая среда для обучения с усилением, реализованная на Python, предлагающая пошаговый многопользовательский мир с клетчатой сеткой, в которой агенты преследуют цели и сталкиваются с опасностями окружающей среды. Каждый агент должен перемещаться по настраиваемой сетке, избегать случайных ловушек, которые штрафуют или завершают эпизоды, и собирать сферы для положительных наград. Среда поддерживает как соревновательные, так и кооперативные режимы, позволяя исследовать различные сценарии обучения. Простая API легко интегрируется с популярными RL-библиотеками, такими как Stable Baselines и RLlib. Основные возможности включают регулируемые размеры сетки, динамическое распределение ловушек и сфер, настраиваемые структуры наград и опциональный логинг для анализа тренировки.