MAGAIL implementa una extensión multi-agente del aprendizaje por imitación adversarial generativa, permitiendo a grupos de agentes aprender comportamientos coordinados a partir de demostraciones de expertos. Construido en Python con soporte para PyTorch (o variantes TensorFlow), MAGAIL consiste en módulos de política (generador) y discriminador entrenados en un bucle adversarial. Los agentes generan trayectorias en entornos como OpenAI Multi-Agent Particle Environment o PettingZoo, que el discriminador evalúa para verificar su autenticidad en comparación con datos de expertos. Mediante actualizaciones iterativas, las redes de políticas convergen hacia estrategias similares a las de los expertos sin funciones de recompensa explícitas. El diseño modular de MAGAIL permite personalizar arquitecturas de red, ingestión de datos de expertos, integración de entornos y hiperparámetros de entrenamiento. Además, la programación y visualización en TensorBoard facilitan el monitoreo y análisis del progreso del aprendizaje multi-agente y los puntos de referencia de rendimiento.

HMAS es un marco de trabajo de código abierto en Python que permite el desarrollo de sistemas jerárquicos de múltiples agentes. Ofrece abstracciones para definir jerarquías de agentes, protocolos de comunicación entre agentes, integración de entornos y ciclos de entrenamiento incorporados. Investigadores y desarrolladores pueden usar HMAS para prototipar interacciones complejas entre agentes, entrenar políticas coordinadas y evaluar el rendimiento en entornos simulados. Su diseño modular facilita extender y personalizar agentes, entornos y estrategias de entrenamiento.