LlamaIndex Supervisor es un marco de trabajo en Python dirigido a desarrolladores para crear, ejecutar y monitorear agentes de IA construidos sobre LlamaIndex. Proporciona herramientas para definir flujos de trabajo como nodos — como recuperación, resumen y procesamiento personalizado — y conectarlos en gráficos dirigidos. Supervisor supervisa cada paso, valida salidas contra esquemas, reintenta en errores y registra métricas. Esto asegura pipelines robustos y repetibles para tareas como generación con recuperación augmentada, QA de documentos y extracción de datos en diversos conjuntos de datos.

Agent Logging proporciona un marco unificado de registro para frameworks de agentes de IA y flujos de trabajo personalizados. Intercepta y registra cada etapa de la ejecución de un agente — generación de indicaciones, invocación de herramientas, respuesta LLM y salida final — junto con marcas de tiempo y metadatos. Los logs se pueden exportar en JSON, CSV o enviarse a servicios de monitorización. La biblioteca soporta niveles de registro personalizables, hooks para integración con plataformas de observabilidad y herramientas de visualización para rastrear caminos de decisión. Con Agent Logging, los equipos obtienen insights sobre el comportamiento del agente, detectan cuellos de botella de rendimiento y mantienen registros transparentes para auditoría.