Introduction


  • LLM의 trustworthiness를 self-awareness 관점에서 탐구
  • Think-Solve-Verify (TSV) 프레임워크 제안
  • Self-awareness가 LLM의 신뢰도에 미치는 영향 분석

Related Papers


  • LLM trustworthiness 평가
  • Self-verification, self-reflection 연구

Methods


  • TSV 프레임워크: Think(문제 분석) → Solve(해결) → Verify(자기 검증) 단계
  • Self-awareness의 정도와 trustworthiness의 관계 측정

Results


  • Self-awareness가 높을수록 trustworthy한 응답 생성
  • 7 citations (LREC-COLING venue)

Discussion


  • Self-awareness를 trustworthiness 향상의 수단으로 활용하는 실용적 프레임워크
  • Metacognitive monitoring과 output quality의 연결