편향의 옛날 옛적에: LLM이 생성한 아동 이야기의 성별 고정관념
Once Upon a Bias: Gender Stereotyping in LLM-Generated Children's Stories
한국어 초록
대규모 언어 모델이 아동용 이야기를 만드는 데 점점 더 많이 사용되고 있다. 잠자리 이야기는 아동의 사회적 역할 인식을 형성할 수 있으므로, LLM이 의도된 수신자의 성별에 따라 서사적 묘사를 달리하는지에 대한 우려가 제기된다. 본 연구는 LLM이 생성한 잠자리 이야기의 성별 고정관념을 조사하기 위해 대규모 연구를 수행했다. 짝지어진 딸/아들 프롬프트와 5세대 설계를 사용하여, 35개 국가 설정과 12개 화자 역할에 걸친 16개 LLM의 보존된 이야기 62,873편을 분석한다. 이러한 차이의 일관성과 해석 가능성을 모두 검토하기 위해, 맥락 보정 어휘 비율 대비, 상대적 고정관념 정렬, 화자-수신자 상호작용 분석, 인간 평가, 표현 수준 개입을 결합한 다단계 평가 프레임워크를 도입한다. 분석 결과, 서사적 구성에서 체계적인 차이가 나타났다. 아들 대상 이야기는 딸 대상 이야기에 비해 더 높은 주체성과 더 낮은 공동체성을 강조한다. 화자의 성별은 이러한 패턴에 대해 제한적인 조절 효과만 보이는 반면, 높은 사교성은 더 뚜렷한 상호작용을 나타낸다. 인간 평가는 일관된 일치도를 보이지만, 어휘 측정치와의 대응은 서사 차원에 따라 다르다. 또한 은닉 상태 분석은 해독 가능한 수신자 성별 정보를 보여 준다. 이러한 결과는 LLM이 생성한 아동 이야기에 지속적이면서도 맥락에 의존하는 표상적 격차가 존재함을 보여 주며, 짧은 형식의 벤치마크를 넘어선 서사 특화 편향 평가의 필요성을 시사한다.
원문 초록
Large language models are increasingly used to create stories for children. Since bedtime stories can shape children's perceptions of social roles, this raises concerns about whether LLMs adapt narrative portrayals according to the intended recipient's gender. We conducted a large-scale study to examine gender stereotyping in LLM-generated bedtime stories. Using matched daughter/son prompts and a five-generation design, we analyze 62,873 retained stories from 16 LLMs across 35 country settings and 12 narrator roles. We introduce a multi-level evaluation framework combining context-adjusted lexical rate contrasts, relative stereotype alignment, narrator-recipient interaction analysis, human evaluation, and representation-level interventions to examine both the consistency and interpretability of these differences. Our results reveal systematic differences in narrative framing: son-directed stories emphasize higher agency and lower communion compared to daughter-directed stories. While narrator gender expresses limited moderation on these patterns, high sociability exhibits a more pronounced interaction. Human evaluations demonstrate consistent agreement, although correspondence with lexical measures varies across narrative dimensions. Additionally, hidden-state analyses reveal decodable recipient-gender information. These findings demonstrate persistent yet context-dependent representational disparities in LLM-generated children's stories and motivate narrative-specific bias evaluation beyond short-form benchmarks.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
- arXiv:2611.24156v1제출 시각 미확인
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.