DEf-MARL (Marco de ejecución descentralizada para aprendizaje por refuerzo multi-agente) proporciona una infraestructura robusta para ejecutar y entrenar agentes cooperativos sin controladores centralizados. Utiliza protocolos de comunicación peer-to-peer para compartir políticas y observaciones entre agentes, permitiendo una coordinación mediante interacciones locales. El framework se integra perfectamente con toolkits RL comunes como PyTorch y TensorFlow, ofreciendo wrappers configurables, recopilación distribuida de rollout y módulos de sincronización de gradientes. Los usuarios pueden definir espacios de observación, funciones de recompensa y topologías de comunicación específicas para cada agente. DEf-MARL soporta adición y eliminación dinámica de agentes en tiempo de ejecución, ejecución tolerante a fallos mediante replicación del estado crítico en nodos, y planificación de comunicación adaptativa para equilibrar exploración y explotación. Acelera el entrenamiento paralizando simulaciones de entornos y reduciendo los cuellos de botella centrales, siendo adecuado para investigación MARL a gran escala y simulaciones industriales.

Swarms.rs es el entorno de ejecución principal en Rust para ejecutar programas de agentes de IA basados en enjambres. Incluye un sistema modular de plugins para integrar lógica personalizada o modelos de IA, una capa de intercambio de mensajes para comunicación p2p y un ejecutor asíncrono para programar comportamientos de los agentes. Estos componentes permiten a los desarrolladores diseñar, desplegar y escalar redes complejas de agentes descentralizados para tareas de simulación, automatización y colaboración multi-agente.