LLM State Machine은 명시적 상태 기계를 사용하여 AI 에이전트를 구축하는 오픈소스 Python 프레임워크입니다. 개발자는 상태를 개별 단계로 정의하며, 각 단계는 대형 언어 모델 또는 사용자 정의 로직을 호출하고, 출력에 따라 전이합니다. 이 방식은 문서 처리, 대화형 봇 또는 자동화 파이프라인과 같은 다단계, LLM 기반 워크플로우에 대해 명확성, 유지보수성, 견고한 오류 처리를 제공합니다.

QueryCraft는 AI 에이전트 개발을 간소화하도록 설계된 Python 기반 프롬프트 엔지니어링 도구킷입니다. 모듈형 파이프라인을 통해 구조화된 프롬프트를 정의하고, 여러 LLM API와 원활하게 연결하며, 사용자 정의 메트릭에 따른 자동 평가를 수행합니다. 내장된 토큰 사용량과 비용의 기록을 통해 성능을 측정하고, 프롬프트 변형을 비교하며 비효율성을 파악할 수 있습니다. 또한, 모델 출력 검사, 워크플로우 단계 시각화, 다양한 모델 간 벤치마킹을 위한 디버깅 도구도 포함되어 있습니다. CLI와 SDK 인터페이스를 통해 CI/CD 파이프라인에 통합 가능하며, 빠른 반복과 협업을 지원합니다. 프롬프트 설계, 시험, 최적화를 위한 포괄적 환경을 제공하여, 팀이 더 정확하고 효율적이며 비용 효과적인 AI 에이전트 솔루션을 제공할 수 있도록 돕습니다.