AppAgent est un cadre d'agent multimodal basé sur LLM conçu pour faire fonctionner des applications smartphone sans scripting manuel. Il intègre la capture d'écran, la détection d'éléments GUI, l'analyse OCR et la planification en langage naturel pour comprendre la disposition des applications et les intentions des utilisateurs. Le cadre envoie des événements tactiles (tap, swipe, saisie de texte) via un appareil Android ou un émulateur pour automatiser les flux de travail. Les chercheurs et développeurs peuvent personnaliser les invites, configurer les API LLM et étendre les modules pour supporter de nouvelles applications et tâches, réalisant une automatisation mobile adaptative et évolutive.

LLPhant est un framework Python open-source qui permet aux développeurs de créer des agents polyvalents pilotés par LLM. Il offre des abstractions intégrées pour l'intégration d'outils (API, recherche, bases de données), la gestion de mémoire pour des conversations multi-tours et des boucles de décision personnalisables. Avec le support de plusieurs backends LLM (OpenAI, Hugging Face, autres), des composants en style plugin et des workflows basés sur la configuration, LLPhant accélère le développement d'agents. Utilisez-le pour prototyper des chatbots, automatiser des tâches ou construire des assistants numériques tirant parti d'outils externes et de mémoire contextuelle sans code répétitif.