LlamaIndex Supervisor est un framework Python orienté développeur conçu pour créer, exécuter et surveiller des agents IA basés sur LlamaIndex. Il fournit des outils pour définir des flux de travail sous forme de nœuds—tels que récupération, résumé et traitement personnalisé—et les connecter en graphes dirigés. La supervision supervise chaque étape, valide les sorties selon des schémas, réessaie en cas d’erreur et enregistre des métriques. Cela garantit des pipelines robustes et reproductibles pour des tâches comme la génération augmentée par récupération, la QA documentaire et l'extraction de données à partir de divers jeux de données.

Agent Logging fournit un cadre unifié de journalisation pour les frameworks d'agents IA et les flux de travail personnalisés. Il intercepte et enregistre chaque étape de l'exécution d'un agent — génération d'invites, invocation d'outils, réponse LLM et sortie finale — avec horodatages et métadonnées. Les logs peuvent être exportés en JSON, CSV ou envoyés à des services de surveillance. La bibliothèque prend en charge des niveaux de journalisation personnalisables, des hooks pour l'intégration avec des plateformes d'observabilité et des outils de visualisation pour suivre les chemins de décision. Avec Agent Logging, les équipes obtiennent des insights sur le comportement des agents, détectent les goulets d'étranglement de performance et maintiennent des enregistrements transparents à des fins d'audit.