simple_rl — это минималистичная библиотека Python, предназначенная для упрощения исследований и обучения в области усиленного обучения. Она обеспечивает единый API для определения сред и агентов, с встроенной поддержкой популярных парадигм RL, включая Q-обучение, методы Монте-Карло и динамическое программирование, такие как итерации стоимости и политики. В рамках включены образцы сред, такие как GridWorld, MountainCar и Multi-Armed Bandits, что облегчает практические эксперименты. Пользователи могут расширять базовые классы для создания собственных сред или агентов, а вспомогательные функции обеспечивают логирование, отслеживание производительности и оценку политики. Легкая архитектура и ясный код делают его идеальным для быстрого прототипирования, обучения основам RL и сравнения новых алгоритмов в воспроизводимой и легко понимаемой среде.

CommNet — это библиотека ориентированная на исследования, реализующая архитектуру CommNet, позволяющую нескольким агентам делиться скрытыми состояниями на каждом шаге времени и обучаться координировать действия в кооперативных средах. Включает определения моделей PyTorch, скрипты обучения и оценки, оболочки среды для OpenAI Gym и утилиты для настройки каналов связи, количества агентов и глубины сети. Исследователи и разработчики могут использовать CommNet для прототипирования и бенчмаркинга стратегий межагентской коммуникации в задачах навигации, преследования–уклонения и сбора ресурсов.