Шепортинг — это открытая симуляционная платформа, предназначенная для исследований и разработок в области обучения с подкреплением с целью изучения и реализации задач пастушества с несколькими агентами. Она предоставляет среду, совместимую с Gym, в которой агенты могут обучаться выполнять поведение, такое как охватывание, сбор и рассеивание целевых групп в непрерывных или дискретных пространствах. В рамках реализованы модульные функции формировки наград, параметризация среды и утилиты для мониторинга обучения. Пользователи могут задавать препятствия, динамичные популяции агентов и собственные политики с использованием TensorFlow или PyTorch. Скрипты визуализации создают траектории и видео взаимодействия агентов. Модульная структура Шепортинга обеспечивает легкую интеграцию с существующими библиотеками RL, что позволяет воспроизводимые эксперименты, сравнение новых стратегий координации и быстрое создание прототипов решений на базе ИИ.
Основные функции Shepherding
Среда многоагентского пастушества, совместимая с Gym
Код как Политики предоставляет структуру для автоматизации генерации политик с использованием кода. Он поддерживает пользователей в определении их пользовательских правил и генерации соответствующих политик на основе их спецификаций. Эта система не только упрощает процесс создания политик, но и обеспечивает точность и согласованность в реализации политик.