CybMASDE permite a investigadores y desarrolladores construir, configurar y ejecutar simulaciones multiagente con aprendizaje por refuerzo profundo. Los usuarios pueden crear escenarios personalizados, definir roles de agentes y funciones de recompensa, y conectar algoritmos RL estándar o personalizados. El marco incluye servidores de entorno, interfaces de agentes en red, recolectores de datos y utilidades de renderizado. Soporta entrenamiento paralelo, monitoreo en tiempo real y guardado de modelos. La arquitectura modular de CybMASDE facilita la integración sin problemas de nuevos agentes, espacios de observación y estrategias de entrenamiento, acelerando experimentos en control cooperativo, comportamiento de enjambre, asignación de recursos y otros casos de uso multiagente.

Este marco de código abierto combina la biblioteca de modelado de agentes AgentSimJs con el motor gráfico 3D de Three.js para ofrecer simulaciones multi-agente interactivas basadas en navegador. Los usuarios pueden definir tipos de agentes, comportamientos y reglas ambientales, configurar detección de colisiones y manejo de eventos, y visualizar simulaciones en tiempo real con opciones de renderizado personalizables. La biblioteca soporta controles dinámicos, gestión de escenas y ajuste de rendimiento, haciéndola ideal para investigación, educación y prototipado de escenarios complejos basados en agentes.

Pits and Orbs es un entorno de código abierto para aprendizaje por refuerzo, implementado en Python, que ofrece un mundo en una cuadrícula multi-agente por turnos donde los agentes persiguen objetivos y enfrentan peligros ambientales. Cada agente debe navegar en una cuadrícula ajustable, evitar trampas colocadas aleatoriamente que penalizan o terminan episodios, y recolectar orbes para recompensas positivas. El entorno soporta modos competitivos y cooperativos, permitiendo a investigadores explorar diversos escenarios de aprendizaje. Su API simple se integra perfectamente con bibliotecas RL populares como Stable Baselines o RLlib. Características principales incluyen dimensiones de cuadrícula ajustables, distribuciones dinámicas de trampas y orbes, estructuras de recompensa configurables y registro opcional para análisis del entrenamiento.