Text-to-Reward는 텍스트 기반 작업 설명 또는 피드백을 RL 에이전트의 스칼라 보상 값으로 매핑하는 보상 모델을 훈련하는 파이프라인을 제공합니다. 트랜스포머 기반 아키텍처와 수집된 인간 선호 데이터로 미세 조정하여 자연어 지시문을 보상 신호로 해석하는 방식을 자동으로 학습합니다. 사용자는 텍스트 프롬프트를 통해 임의의 작업 정의가 가능하며, 모델을 훈련시키고 학습된 보상 함수를 어떤 RL 알고리즘에든 통합할 수 있습니다. 이 방식은 수작업 보상 설계를 제거하고 샘플 효율성을 향상시키며, 에이전트가 복잡한 다단계 지시를 따라가도록 지원합니다.
