Gym-Recsys es una caja de herramientas que envuelve tareas de recomendación en entornos OpenAI Gym, permitiendo que algoritmos de aprendizaje por refuerzo interactúen paso a paso con matrices de usuario-ítem simuladas. Proporciona generadores de comportamiento de usuario sintético, soporta cargar conjuntos de datos populares y entrega métricas estándar como Precision@K y NDCG. Los usuarios pueden personalizar funciones de recompensa, modelos de usuario y pools de ítems para experimentar con diferentes estrategias de recomendación basadas en RL de manera reproducible.

En su núcleo, RxAgent-Zoo es un framework RL reactivo que trata eventos de datos de entornos, buffers de repetición y bucles de entrenamiento como flujos observables. Los usuarios pueden encadenar operadores para preprocesar observaciones, actualizar redes y registrar métricas de manera asíncrona. La biblioteca ofrece soporte para entornos paralelos, planificadores configurables y la integración con los estándares de Gym y Atari. Una API de plug-and-play permite cambiar componentes de agentes sin problemas, facilitando la investigación reproducible, la experimentación rápida y flujos de trabajo de entrenamiento escalables.