Patrolling-Zoo ofrece un marco flexible que permite a los usuarios crear y experimentar con tareas de patrulla multi-agente en Python. La biblioteca incluye una variedad de entornos basados en cuadrícula y en gráfico, simulando escenarios de vigilancia, monitoreo y cobertura. Los usuarios pueden configurar el número de agentes, el tamaño del mapa, la topología, las funciones de recompensa y los espacios de observación. Gracias a la compatibilidad con PettingZoo y las API de Gym, soporta una integración fluida con algoritmos populares de aprendizaje por refuerzo. Este entorno facilita el benchmarking y la comparación de técnicas MARL en configuraciones coherentes. Al proporcionar escenarios estándar y herramientas para crear otros nuevos, Patrolling-Zoo acelera la investigación en robótica autónoma, vigilancia de seguridad, operaciones de búsqueda y rescate, y cobertura eficiente de áreas utilizando estrategias de coordinación multi-agente.

GridWorldEnvs ofrece una suite completa de entornos de mundos en cuadrícula para apoyar el diseño, prueba y evaluación de sistemas de aprendizaje por refuerzo y multi-agentes. Los usuarios pueden configurar fácilmente dimensiones de la cuadrícula, posiciones iniciales de los agentes, ubicaciones de objetivos, obstáculos, estructuras de recompensas y espacios de acción. La biblioteca incluye plantillas listas para usar como navegación clásica, evitación de obstáculos y tareas cooperativas, además de permitir la definición de escenarios personalizados mediante JSON o clases en Python. Integración fluida con la API de OpenAI Gym permite aplicar algoritmos RL estándar directamente. Además, soporta experimentos con un solo agente o múltiples agentes, herramientas de registro y visualización para seguir el rendimiento de los agentes.

gym-multigrid ofrece una serie de entornos en cuadrícula personalizables diseñados para tareas de navegación y exploración en múltiples habitaciones en aprendizaje por refuerzo. Cada entorno consiste en habitaciones interconectadas pobladas de objetos, llaves, puertas y obstáculos. Los usuarios pueden ajustar programáticamente el tamaño de la cuadrícula, las configuraciones de las habitaciones y la colocación de objetos. La biblioteca soporta modos de observación completa o parcial, ofreciendo representaciones del estado en RGB o matriz. Las acciones incluyen movimiento, interacción con objetos y manipulación de puertas. Al integrarlo como entorno de Gym, los investigadores pueden aprovechar cualquier agente compatible con Gym para entrenar y evaluar algoritmos en tareas como rompecabezas de llaves y puertas, recuperación de objetos y planificación jerárquica. El diseño modular y las dependencias mínimas de gym-multigrid lo hacen ideal para evaluar nuevas estrategias de IA.