가치 벤치마크를 넘어: 대칭 Q-정렬을 통한 대규모 언어 모델의 가치-구조 정렬 측정
Beyond Value Benchmarks: Measuring Value-Structure Alignment in Large Language Models via Symmetric Q-Sorts
Q 방법론(Q methodology)에 기반한 대칭적 인간-LLM Q-정렬 프레임워크로 140개 도덕 진술의 가치-구조 정렬(value-structure alignment)을 측정하며, 12개 LLM 평가에서 패밀리 간 이질성·생성 확률성 민감도·국소적 비정렬이 나타나 전역 점수가 지역 왜곡을 가릴 수 있음을 보인다. 항목별 도덕 벤치마크를 보완해 모델이 상호 경쟁하는 가치를 응집된 체계로 어떻게 우선순위화하는지 구조적으로 평가한다.