LLM 심리측정 평가 재고: 자기보고가 행동을 예측하는 때와 이유
Rethinking Psychometric Evaluation of LLMs: When and Why Self-Reports Predict Behavior
대규모 언어 모델(LLM)의 자기보고(self-reports)가 실제 행동을 예측하는지 분석하기 위해 Big 5 대신 계획된 행동 이론(TPB)을 적용하여 평가했다. 그 결과, 동일한 대화 내에서는 TPB가 인간 수준의 일관성을 보이지만 별도의 대화 간에서는 문맥과 행동 유형에 따라 예측력이 선택적으로 나타남을 확인했다.