VacuumWorld es una plataforma de simulación de código abierto diseñada para facilitar el desarrollo y la evaluación de algoritmos de aprendizaje por refuerzo multiagente. Proporciona entornos basados en cuadrícula donde agentes virtuales de aspiradoras operan para detectar y eliminar manchas de suciedad en diseños personalizables. Los usuarios pueden ajustar parámetros como tamaño de cuadrícula, distribución de suciedad, ruido estocástico en movimiento y estructuras de recompensa para modelar diferentes escenarios. El marco incluye soporte integrado para protocolos de comunicación entre agentes, paneles de visualización en tiempo real y utilidades de registro para el seguimiento del rendimiento. Con API de Python simples, investigadores pueden integrar rápidamente sus algoritmos RL, comparar estrategias cooperativas o competitivas y realizar experimentos reproducibles, haciendo que VacuumWorld sea ideal para investigación académica y docencia.

MADDPG escalable es un marco orientado a la investigación para el aprendizaje por refuerzo multiagente, ofreciendo una implementación escalable del algoritmo MADDPG. Cuenta con críticos centralizados durante el entrenamiento y actores independientes en tiempo de ejecución para estabilidad y eficiencia. La biblioteca incluye scripts Python para definir entornos personalizados, configurar arquitecturas de red y ajustar hiperparámetros. Los usuarios pueden entrenar múltiples agentes en paralelo, monitorear métricas y visualizar las curvas de aprendizaje. Se integra con entornos similares a OpenAI Gym y soporta aceleración GPU vía TensorFlow. Gracias a sus componentes modulares, MADDPG escalable permite experimentos flexibles en tareas multiagente cooperativas, competitivas o mixtas, facilitando prototipado rápido y benchmarking.