학위가 없는 백인 남성이 대규모 언어 모델로부터 가장 낮은 평가를 받는다
White Men Without Degrees Receive the Lowest Ratings from Large Language Models
신용, 채용, 임대 지원서에 대한 통제된 대규모 언어 모델(LLM) 평가에서 학사 학위가 없는 백인 남성이 성별·인종·학력으로 나뉜 8개 집단 중 가장 낮은 평균 평가를 받는 것으로 나타났다. 본 연구는 12개 개발 그룹의 18개 모델을 대상으로 전요인 비네트(full-factorial vignette) 실험을 수행하였으며, 각 환경 내에서 명시된 재정적 또는 직업적 상황을 일정하게 유지하면서 성별, 인종, 연령, 시민권 여부, 학력을 변화시켰다. 각 모델은 환경당 32개의 프로필 전체를 10회씩 평가하여 총 17,280건의 평가 결과를 산출하였다. 모델, 연령, 시민권 여부를 통틀어 평균을 냈을 때, 학위가 없는 백인 남성에 대한 평가는 0-100점 척도 기준으로 신용 75.87점, 채용 92.71점, 임대 주택 86.62점으로 8개 집단 중 가장 낮았다. 반면 학위가 있는 흑인 여성이 가장 높은 평균 평가를 받았으며, 각각 2.94점, 3.66점, 3.56점의 격차를 보였다. 개별 속성 효과를 살펴보면 세 가지 환경 모두에서 여성, 흑인 지원자, 학위 소지자에게 유리하게 작용했다. 학위가 없는 백인 남성은 54개의 모델-시나리오 조합 중 46개(85.2%)에서 가장 낮거나 두 번째로 낮은 평균 점수를 기록했다. 이러한 양상은 학위가 없는 백인 남성 집단에서 심화되는 경제적·건강상 취약성에 대한 기존 실증 결과와 연결되며, 광범위한 인종 또는 성별 범주에 의해 불이익이 가려질 수 있는 집단을 부각한다.