Pits and Orbs — это открытая среда для обучения с усилением, реализованная на Python, предлагающая пошаговый многопользовательский мир с клетчатой сеткой, в которой агенты преследуют цели и сталкиваются с опасностями окружающей среды. Каждый агент должен перемещаться по настраиваемой сетке, избегать случайных ловушек, которые штрафуют или завершают эпизоды, и собирать сферы для положительных наград. Среда поддерживает как соревновательные, так и кооперативные режимы, позволяя исследовать различные сценарии обучения. Простая API легко интегрируется с популярными RL-библиотеками, такими как Stable Baselines и RLlib. Основные возможности включают регулируемые размеры сетки, динамическое распределение ловушек и сфер, настраиваемые структуры наград и опциональный логинг для анализа тренировки.

Java-Action-Storage — это основной компонент рамки multi-agent LightJason, предназначенный для обработки сквозной персистентности действий агентов. Он определяет универсальный интерфейс ActionStorage с адаптерами для популярных баз данных и файловых систем, поддерживает асинхронные и пакетные записи, а также управляет параллельным доступом от нескольких агентов. Пользователи могут настраивать стратегии хранения, запрашивать исторические журналы действий и воспроизводить последовательности для аудита работы системы или восстановления состояний агентов после сбоев. Модуль интегрируется с помощью простого внедрения зависимостей, что обеспечивает быструю адаптацию в проектах ИИ на базе Java.