AppAgent는 수동 스크립팅 없이 스마트폰 애플리케이션을 작동하는 데 목적이 있는 다중모달 LLM 기반 프레임워크입니다. 화면 캡처, GUI 요소 감지, OCR 파싱, 자연어 계획을 통합하여 앱 레이아웃과 사용자 의도를 이해합니다. 이 프레임워크는 Android 장치 또는 에뮬레이터를 통해 터치 이벤트(탭, 스와이프, 텍스트 입력)를 발행하여 작업 흐름을 자동화합니다. 연구자와 개발자는 프롬프트를 사용자 지정하고, LLM API를 구성하며, 새 앱과 작업을 지원하는 모듈을 확장할 수 있어 적응적이고 확장 가능한 모바일 자동화를 실현합니다.

LLPhant는 개발자가 다목적 LLM 기반 에이전트를 생성할 수 있도록 하는 오픈소스 파이썬 프레임워크입니다. API, 검색, 데이터베이스 등 외부 도구 통합, 다중 턴 대화용 메모리 관리, 커스터마이징 가능한 의사결정 루프를 위한 내장 추상화를 제공합니다. OpenAI, Hugging Face 등의 여러 LLM 백엔드와 플러그인 스타일 컴포넌트, 구성 기반 워크플로우를 지원하여 에이전트 개발을 가속화합니다. 챗봇 프로토타입, 작업 자동화, 외부 도구와 컨텍스트 메모리를 활용하는 디지털 어시스턴트 구축에 활용할 수 있습니다.