AI Hedge Fund 5zu proporciona una tubería completa para el comercio cuantitativo: un entorno personalizable para simular múltiples clases de activos, módulos de agentes basados en aprendizaje por refuerzo, utilidades de backtesting, integración de datos de mercado en tiempo real y herramientas de gestión de riesgos. Los usuarios pueden configurar fuentes de datos, definir funciones de recompensa, entrenar agentes con datos históricos y evaluar el rendimiento en métricas financieras clave. El marco soporta desarrollo de estrategias modulares y puede extenderse a APIs de corredores en vivo para desplegar bots de trading de nivel productivo.

Los agentes de IA para Piedra-Papel-Tijeras son un proyecto open-source en Python que demuestra cómo construir, entrenar y evaluar diferentes estrategias de IA—juego aleatorio, reconocimiento de patrones basado en reglas y aprendizaje por refuerzo (Q-learning)—en el juego clásico Piedra-Papel-Tijeras. Proporciona clases de agentes modulares, un motor de juego configurable, registro de rendimiento y utilidades de visualización. Los usuarios pueden intercambiar fácilmente agentes, ajustar parámetros de aprendizaje y explorar el comportamiento de IA en escenarios competitivos.

El entorno Beer Game proporciona una simulación en tiempo discreto de una cadena de suministro de cerveza de cuatro etapas — minorista, mayorista, distribuidor y fabricante — con una interfaz de OpenAI Gym. Los agentes reciben observaciones que incluyen inventario en mano, stock en línea y pedidos entrantes, y luego producen cantidades de pedidos. El entorno calcula los costos por paso de mantenimiento de inventario y pedidos pendientes, y admite distribuciones de demanda y tiempos de entrega personalizables. Se integra perfectamente con bibliotecas RL populares como Stable Baselines3, permitiendo a investigadores y educadores evaluar y entrenar algoritmos en tareas de optimización de la cadena de suministro.

BotPlayers es un marco versátil de código abierto que simplifica el desarrollo y despliegue de agentes de juego impulsados por IA. Destaca por su capa de abstracción de entorno flexible que soporta captura de pantalla, APIs web o interfaces de simulación personalizadas, permitiendo a los bots interactuar con diversos juegos. Incluye algoritmos de aprendizaje por refuerzo incorporados, algoritmos genéticos y heurísticas basadas en reglas, además de herramientas para registro de datos, puntos de control de modelos y visualización del rendimiento. Su sistema de plugins modular permite a los desarrolladores personalizar sensores, acciones y políticas de IA en Python o Java. BotPlayers también ofrece configuración basada en YAML para prototipado rápido y pipelines automáticos para entrenamiento y evaluación. Compatible con Windows, Linux y macOS, este marco acelera la experimentación y producción de agentes de juego inteligentes.

CityLearn proporciona una plataforma de simulación modular para la investigación en gestión energética usando aprendizaje por refuerzo. Los usuarios pueden definir agrupaciones de edificios multi-zona, configurar sistemas HVAC, unidades de almacenamiento y fuentes renovables, y luego entrenar agentes RL frente a eventos de respuesta a la demanda. El entorno expone observaciones de estado como temperaturas, perfiles de carga y precios de energía, mientras que las acciones controlan puntos de consigna y despachos de almacenamiento. Una API de recompensas flexible permite métricas personalizadas, como ahorros en costos o reducción de emisiones, y las utilidades de registro soportan análisis de rendimiento. CityLearn es ideal para benchmarking, aprendizaje por currículo y desarrollo de nuevas estrategias de control en un marco de investigación reproducible.

CryptoTrader Agents proporciona un conjunto completo de herramientas para diseñar, entrenar y desplegar estrategias de negociación con IA en mercados de criptomonedas. Incluye un entorno modular para ingestión de datos, ingeniería de características y funciones de recompensa personalizadas. Los usuarios pueden aprovechar algoritmos preconfigurados de aprendizaje por refuerzo o integrar sus propios modelos. La plataforma ofrece pruebas retrospectivas simuladas con datos históricos de precios, controles de gestión de riesgos y seguimiento de métricas detalladas. Cuando la estrategia esté lista, los agentes se pueden conectar a APIs de exchange en vivo para ejecución automática. Construido en Python, el marco es completamente extensible, permitiendo a los usuarios prototipar nuevas tácticas, ejecutar barridos de parámetros y monitorear el rendimiento en tiempo real.

Fast Reinforcement Learning es un marco Python especializado diseñado para acelerar el desarrollo y la ejecución de agentes de aprendizaje por refuerzo. Ofrece soporte listo para usar para algoritmos populares como PPO, A2C, DDPG y SAC, combinados con gestiones de entornos vectorizados de alto rendimiento. Los usuarios pueden configurar fácilmente redes de políticas, personalizar bucles de entrenamiento y aprovechar la aceleración GPU para experimentos a gran escala. El diseño modular de la biblioteca garantiza una integración fluida con entornos OpenAI Gym, permitiendo a investigadores y practicantes prototipar, hacer benchmarks y desplegar agentes en diversas tareas de control, juegos y simulación.

DeepSeek R1 representa un avance significativo en inteligencia artificial, brindando un rendimiento de primera categoría en tareas de razonamiento, matemáticas y codificación. Utilizando una sofisticada arquitectura MoE (Mixture of Experts) con 37B de parámetros activados y 671B de parámetros totales, DeepSeek R1 implementa técnicas avanzadas de aprendizaje por refuerzo para alcanzar puntos de referencia de vanguardia. El modelo ofrece un rendimiento robusto, incluyendo un 97,3% de precisión en MATH-500 y un ranking en el percentil 96,3 en Codeforces. Su naturaleza de código abierto y opciones de despliegue rentables lo hacen accesible para una amplia gama de aplicaciones.

Dino Reinforcement Learning proporciona un conjunto completo de herramientas para entrenar a un agente IA para jugar el juego de dinosaurios de Chrome mediante aprendizaje por refuerzo. Al integrarse con una instancia de Chrome sin interfaz a través de Selenium, captura cuadros en tiempo real del juego y los procesa en representaciones de estado optimizadas para entradas de redes Q profundas. El marco incluye módulos para memoria de reproducción, exploración epsilon-greedy, modelos de redes neuronales convolucionales y bucles de entrenamiento con hiperparámetros personalizables. Los usuarios pueden monitorear el progreso del entrenamiento a través de registros en la consola y guardar puntos de control para evaluación posterior. Tras el entrenamiento, el agente puede desplegarse para jugar automáticamente en vivo o compararse con diferentes arquitecturas de modelos. El diseño modular permite una sustitución sencilla de algoritmos RL, haciendo de esta plataforma un entorno flexible para experimentación.

DQN-Deep-Q-Network-Atari-Breakout-TensorFlow proporciona una implementación completa del algoritmo DQN adaptada para el entorno Atari Breakout. Utiliza una red neuronal convolucional para aproximar valores Q, aplica repetición de experiencias para romper correlaciones entre observaciones secuenciales y emplea una red objetivo actualizada periódicamente para estabilizar el entrenamiento. El agente sigue una política epsilon-greedy para la exploración y puede entrenarse desde cero con entrada de píxeles en bruto. El repositorio incluye archivos de configuración, scripts de entrenamiento para monitorear el crecimiento de recompensas, scripts de evaluación para probar modelos entrenados y utilidades TensorBoard para visualizar métricas de entrenamiento. Los usuarios pueden ajustar hiperparámetros como tasa de aprendizaje, tamaño del buffer de repetición y tamaño de lotes para experimentar con diferentes configuraciones.

La Comunicación Emergente en Agentes es un marco de trabajo de código abierto en PyTorch diseñado para investigadores que exploran cómo los sistemas multiagente desarrollan sus propios protocolos de comunicación. La biblioteca ofrece implementaciones flexibles de tareas cooperativas de aprendizaje por refuerzo, incluyendo juegos referenciales, juegos combinatorios y desafíos de identificación de objetos. Los usuarios definen arquitecturas de agentes emisores y receptores, especifican propiedades de los canales de mensajes como tamaño de vocabulario y longitud de secuencia, y seleccionan estrategias de entrenamiento como gradientes de política o aprendizaje supervisado. El framework incluye scripts end-to-end para ejecutar experimentos, analizar la eficiencia de la comunicación y visualizar lenguas emergentes. Su diseño modular permite una extensión fácil con nuevos entornos de juego o funciones de pérdida personalizadas. Los investigadores pueden reproducir estudios publicados, evaluar nuevos algoritmos y analizar la composicionalidad y semántica de los lenguajes de los agentes emergentes.

Gym-Recsys es una caja de herramientas que envuelve tareas de recomendación en entornos OpenAI Gym, permitiendo que algoritmos de aprendizaje por refuerzo interactúen paso a paso con matrices de usuario-ítem simuladas. Proporciona generadores de comportamiento de usuario sintético, soporta cargar conjuntos de datos populares y entrega métricas estándar como Precision@K y NDCG. Los usuarios pueden personalizar funciones de recompensa, modelos de usuario y pools de ítems para experimentar con diferentes estrategias de recomendación basadas en RL de manera reproducible.

GridWorldEnvs ofrece una suite completa de entornos de mundos en cuadrícula para apoyar el diseño, prueba y evaluación de sistemas de aprendizaje por refuerzo y multi-agentes. Los usuarios pueden configurar fácilmente dimensiones de la cuadrícula, posiciones iniciales de los agentes, ubicaciones de objetivos, obstáculos, estructuras de recompensas y espacios de acción. La biblioteca incluye plantillas listas para usar como navegación clásica, evitación de obstáculos y tareas cooperativas, además de permitir la definición de escenarios personalizados mediante JSON o clases en Python. Integración fluida con la API de OpenAI Gym permite aplicar algoritmos RL estándar directamente. Además, soporta experimentos con un solo agente o múltiples agentes, herramientas de registro y visualización para seguir el rendimiento de los agentes.

gym-fx es una biblioteca de Python de código abierto que implementa un entorno simulado de trading en Forex usando la interfaz OpenAI Gym. Ofrece soporte para múltiples pares de divisas, integración de flujos de precios históricos, indicadores técnicos y funciones de recompensa completamente personalizables. Al proporcionar una API estandarizada, gym-fx simplifica el benchmarking y el desarrollo de algoritmos de aprendizaje por refuerzo para trading algorítmico. Los usuarios pueden configurar el deslizamiento de mercado, costos de transacción y espacios de observación para imitar de cerca escenarios de trading en vivo, facilitando el desarrollo y evaluación de estrategias robustas.

gym-llm amplía el ecosistema OpenAI Gym definiendo entornos textuales donde los agentes LLM interactúan mediante indicaciones y acciones. Cada entorno sigue las convenciones de step, reset y render de Gym, emitiendo observaciones en forma de texto y aceptando respuestas generadas por modelos como acciones. Los desarrolladores pueden crear tareas personalizadas especificando plantillas de indicaciones, cálculos de recompensa y condiciones de terminación, habilitando benchmarks sofisticados de toma de decisiones y diálogos. La integración con librerías RL, herramientas de registro y métricas de evaluación configurables facilita experimentos completos. Ya sea evaluando habilidades de resolución de puzzles, gestión de diálogos, o navegación en tareas estructuradas, gym-llm ofrece un marco estandarizado y reproducible para investigación y desarrollo de agentes lingüísticos avanzados.

gym-multigrid ofrece una serie de entornos en cuadrícula personalizables diseñados para tareas de navegación y exploración en múltiples habitaciones en aprendizaje por refuerzo. Cada entorno consiste en habitaciones interconectadas pobladas de objetos, llaves, puertas y obstáculos. Los usuarios pueden ajustar programáticamente el tamaño de la cuadrícula, las configuraciones de las habitaciones y la colocación de objetos. La biblioteca soporta modos de observación completa o parcial, ofreciendo representaciones del estado en RGB o matriz. Las acciones incluyen movimiento, interacción con objetos y manipulación de puertas. Al integrarlo como entorno de Gym, los investigadores pueden aprovechar cualquier agente compatible con Gym para entrenar y evaluar algoritmos en tareas como rompecabezas de llaves y puertas, recuperación de objetos y planificación jerárquica. El diseño modular y las dependencias mínimas de gym-multigrid lo hacen ideal para evaluar nuevas estrategias de IA.

HFO_DQN combina Python y TensorFlow para ofrecer un pipeline completo para entrenar agentes de fútbol usando Deep Q-Networks. Los usuarios pueden clonar el repositorio, instalar dependencias incluyendo el simulador HFO y bibliotecas Python, y configurar los parámetros de entrenamiento en archivos YAML. El marco implementa reproducción de experiencias, actualizaciones del red objetivo, exploración epsilon-greedy y modelado de recompensas adaptado al dominio de ofensiva de medio campo. Incluye scripts para entrenamiento de agentes, registro de rendimiento, partidas de evaluación y visualización de resultados. La estructura modular permite integrar arquitecturas de redes neuronales personalizadas, algoritmos RL alternativos y estrategias de coordinación multiagente. Las salidas incluyen modelos entrenados, métricas de rendimiento y visualizaciones del comportamiento, facilitando investigaciones en aprendizaje por refuerzo y sistemas multiagente.

Jason-RL añade una capa de aprendizaje por refuerzo al marco multiagente de Jason, permitiendo que los agentes AgentSpeak BDI aprendan políticas de selección de acciones mediante retroalimentación de recompensas. Implementa algoritmos Q-learning y SARSA, soporta la configuración de parámetros de aprendizaje (tasa de aprendizaje, factor de descuento, estrategia de exploración) y registra métricas de entrenamiento. Al definir funciones de recompensa en los planes de agentes y ejecutar simulaciones, los desarrolladores pueden observar cómo los agentes mejoran su toma de decisiones con el tiempo y se adaptan a entornos cambiantes sin codificación manual de políticas.

MARFT es un LLM basado en Python que permite experimentos reproducibles y prototipado rápido de sistemas de IA colaborativos.

MineLand proporciona un entorno sandbox 3D flexible inspirado en Minecraft para entrenar agentes de aprendizaje por refuerzo. Cuenta con APIs compatibles con Gym para una integración fluida con bibliotecas RL existentes como Stable Baselines, RLlib, y implementaciones personalizadas. Los usuarios tienen acceso a una biblioteca de tareas, incluyendo recolección de recursos, navegación y desafíos de construcción, cada una con dificultades y estructuras de recompensa configurables. Renderizado en tiempo real, escenarios multi-agente y modos sin interfaz permiten entrenamiento escalable y benchmarking. Los desarrolladores pueden diseñar nuevos mapas, definir funciones de recompensa personalizadas y agregar sensores o controles adicionales. La base de código open-source de MineLand fomenta la investigación reproducible, el desarrollo colaborativo y la creación rápida de prototipos de agentes IA en mundos virtuales complejos.