FMAS (Гибкая система мультиагентов) — это открытая библиотека Python для построения, выполнения и визуализации моделирования мультиагентов. Вы можете определить агентов с собственной логикой принятия решений, настроить модель окружения, установить каналы обмена сообщениями для коммуникации и запускать масштабируемое моделирование. FMAS предоставляет хуки для мониторинга состояния агентов, отладки взаимодействий и экспорта результатов. Его модульная архитектура поддерживает плагины для визуализации, сбора метрик и интеграции с внешними источниками данных, что делает его идеальным для исследований, обучения и прототипирования автономных систем в реальных условиях.

Jason-RL добавляет слой обучения с подкреплением в многопользовательскую систему Jason, позволяя агентам AgentSpeak BDI изучать политики выбора действий по наградной обратной связи. Реализует алгоритмы Q-обучения и SARSA, поддерживает настройку параметров обучения (скорость обучения, коэффициент дисконтирования, стратегию исследования) и регистрирует метрики тренировки. Определяя функции наград в планах агентов и запуская симуляции, разработчики могут наблюдать за улучшением решений агентов со временем и их адаптацией к меняющимся условиям без ручного кодирования политик.

MultiAgentModel предоставляет единый API для определения пользовательских окружений и классов агентов для сценариев с множеством агентов. Разработчики могут задавать пространства наблюдения и действий, структуры награды и каналы связи. Встроенная поддержка популярных RL-алгоритмов, таких как PPO, DQN и A2C, позволяет тренировать модели с минимальной настройкой. Инструменты визуализации в реальном времени помогают отслеживать взаимодействия агентов и показатели их эффективности. Модульная архитектура обеспечивает легкую интеграцию новых алгоритмов и пользовательских модулей. Также включает гибкую систему конфигурации для настройки гиперпараметров, утилиты логирования для отслеживания экспериментов и совместимость с OpenAI Gym для бесшовной портативности. Пользователи могут совместно работать над общими окружениями и воспроизводить зафиксированные сессии для анализа.