Introduction
- LLM의 verbalized confidence가 poorly calibrated한 문제
- Listener-aware finetuning (LACIE)으로 confidence calibration 개선
Related Papers
- Verbalized confidence
- Calibration methods
Methods
- Listener-aware objective: confidence가 listener에게 유용하도록 finetuning
- Verbalized confidence의 calibration 최적화
Results
- LACIE로 verbalized confidence calibration 유의미하게 개선
- 13 citations
Discussion
- Self-report confidence의 calibration 가능성
- Training을 통한 metacognitive ability 향상