Introduction
- LLM이 자신의 “story”(학습 이력, 능력 변화)를 인식하는지 탐구
- Lifelong learning 맥락에서의 self-knowledge 평가
- 2 citations
Related Papers
- Continual/lifelong learning
- LLM self-awareness 연구
Methods
- LLM을 “character”로 설정하고 자신의 story를 알고 있는지 평가하는 벤치마크
- 학습 전후의 knowledge 변화 인식 능력 측정
Results
- LLM이 자신의 학습 이력에 대한 인식이 제한적
- Self-knowledge가 static snapshot에 국한
Discussion
- Self-awareness의 temporal dimension에 대한 새로운 관점
- LLM의 자기 인식이 정적이라는 한계 시사