모듈형 LLM 아키텍처는 재사용 가능한 구성 요소를 통해 사용자 정의 LLM 기반 애플리케이션 생성 과정을 단순화하는 데 목적이 있습니다. 세션 상태 유지를 위한 메모리 모듈, 외부 API 호출용 도구 인터페이스, 템플릿 또는 동적 프롬프트 생성을 위한 프롬프트 매니저 그리고 에이전트 워크플로우를 제어하는 오케스트레이션 엔진을 제공합니다. 이 모듈들을 체인 형식으로 구성하여 다단계 추론, 맥락 기반 응답, 데이터 통합 같은 복잡한 동작을 가능하게 합니다. 프레임워크는 여러 LLM 백엔드를 지원하며, 모델을 전환하거나 혼합하는 것도 가능합니다. 또한, 새 모듈 또는 자체 로직을 추가할 수 있는 확장 포인트를 갖추고 있어, 재사용성을 높이고 투명성과 제어력을 유지하는 개발을 지원합니다.
