AI 모델 4월 24일
서술형 설명을 위한 AI가 스스로 적응하는 프로세스: LLM을 이용한 태스크 플랜 설명
대규모 언어 모델(LLM)을 이용한 복잡한 소프트웨어 시스템에 대한 설명을 생성하는 것은 AI의 불투명한 프로세스, 즉 자동화된 태스크 플랜에 대한 이해가 가능합니다. 그러나 이러한 설명의 품질과 신뢰성은 효과적인 프롬프트 엔지니어링에 의존합니다. 사용자 그룹의 다양한 이해 관계자가 프롬프트를 어떻게 형성하고 개선하는지에 대한 체계적인 이해의 부족은 이러한 프로세스를 자동화하는 도구의 개발을 방해합니다. COMPASS(코그니티브 모델링을 이용한 프롬프트 자동 합성 시스템)는 프롬프트 엔지니어링을 인지적이고 확률적 의사 결정 프로세스로 formalize한 self-adaptive 접근법을 소개합니다. COMPASS는 사용자의 latente 인지 상태, 즉 주의, 이해, 불확실성, 관찰 가능한 상호 작용 징후를 포함하여 POMDP를 모델링하여 adaptively 설명 생성 및 프롬프트 개선에 대한 synthesised 정책을 제공합니다. 우리는 두 가지 다양한 사이버-물리적 시스템의 사례를 사용하여 COMPASS의 adaptively 설명 생성 및 그 품질을 평가합니다. 양적 및 질적 평가를 통해 COMPASS가 복잡한 태스크 플랜 시스템에 인간 인지 및 사용자 프로파일의 피드백을 통합하는 자동 프롬프트 합성을 가능하게 함을 보여줍니다.