simple_rl es una biblioteca Python minimalista diseñada para agilizar la investigación y educación en aprendizaje por refuerzo. Ofrece una API coherente para definir entornos y agentes, con soporte incorporado para paradigmas RL comunes como Q-learning, Monte Carlo y algoritmos de programación dinámica como iteración de valores y políticas. El marco incluye entornos de ejemplo como GridWorld, MountainCar y Multi-Armed Bandits, facilitando experimentación práctica. Los usuarios pueden extender clases base para implementar entornos o agentes personalizados, mientras que funciones utilitarias manejan el registro, seguimiento de rendimiento y evaluación de políticas. La arquitectura ligera y código claro de simple_rl lo hacen ideal para prototipado rápido, enseñanza de fundamentos de RL y benchmarking de nuevos algoritmos en un entorno reproducible y fácil de entender.

CommNet es una biblioteca orientada a la investigación que implementa la arquitectura CommNet, permitiendo que múltiples agentes compartan estados ocultos en cada paso temporal y aprendan a coordinar acciones en entornos cooperativos. Incluye definiciones de modelos en PyTorch, scripts de entrenamiento y evaluación, envoltorios para entornos OpenAI Gym y utilidades para personalizar canales de comunicación, conteo de agentes y profundidades de red. Investigadores y desarrolladores pueden usar CommNet para prototipar y evaluar estrategias de comunicación entre agentes en tareas de navegación, persecución-salvación y recolección de recursos.