В основе RxAgent-Zoo лежит реактивная RL-структура, которая рассматривает события данных из окружающей среды, буферы повторного воспроизведения и циклы обучения как наблюдаемые потоки. Пользователи могут цепочками операторов предобрабатывать наблюдения, обновлять сети и асинхронно регистрировать метрики. Библиотека поддерживает параллельную работу с окружающими средами, настраиваемые планировщики и интеграцию с популярными бенчмарками Gym и Atari. API "подключи и используй" позволяет бесшовно заменять компоненты агента, что способствует воспроизводимости, быстрому экспериментированию и масштабируемым рабочим потокам обучения.

ReasonChain предоставляет модульную конвейерную систему для построения последовательностей операций на базе LLM, где вывод каждого шага подается на вход следующему. Пользователи могут определять пользовательские узлы цепочек для генерации подсказок, вызова API у разных поставщиков LLM, условной логики маршрутизации и функций агрегирования финальных результатов. Встроенные инструменты для отладки и логирования позволяют отслеживать промежуточные состояния, поддерживают запросы к векторным базам данных и легко расширяются с помощью пользовательских модулей. Независимо от целей — решение многоступенчатых задач рассуждения, организация преобразований данных или создание диалоговых агентов с памятью — ReasonChain предоставляет прозрачную, многократно используемую и тестируемую среду. Его дизайн стимулирует эксперименты с стратегиями цепочек мысли, что делает его идеальным для исследований, прототипирования и решений для производства AI.

Pacman AI предлагает полностью функциональную среду на Python и платформу для агентов для классической игры Pacman. Проект реализует основные алгоритмы обучения с подкреплением—Q-обучение и итерацию ценностей—для обучения агентов оптимальным политикам сбора пилюль, навигации по лабиринту и избегания призраков. Пользователи могут задавать собственные функции наград и настраивать гиперпараметры, такие как скорость обучения, коэффициент дисконтирования и стратегию исследования. Эта платформа поддерживает ведение метрик, визуализацию производительности и воспроизводимость экспериментов. Спроектирована для легкой расширяемости, что позволяет исследователям и студентам внедрять новые алгоритмы или нейросетевые подходы и сравнивать их с базовыми методами на сетке в области Pacman.