미완료상 역설에서 무어식 부조리까지: 상과 화용의 모호성에서 단일 추론 경로의 고착과 다중 후보 언어화
From Imperfective Paradox to Moorean Absurdity: Single-Chain Reasoning Lock-In and Multi-Candidate Verbalization Across Aspectual and Pragmatic Ambiguity
한국어 초록
자연어 함의와 일관성 판단은 사건이 일어나기만 했는지, 목표 종결점에 도달했는지, 계획을 충족했는지, 여러 화용적 기준에서 평가했는지에 따라 달라지는 경우가 많다. Qwen3-8B-Q8_0으로 사전 등록하고 봉인한 정식 실험 네 개에서 단일 경로 조기 고착 가설의 관찰 가능한 결과를 검정했다. 정식 실험 단위는 16,640개이고 온도는 0.0이었다. 가설 항목 16개 중 15개는 확증 분석 지위를 유지했다. 실험별 가족 단위 오류율 0.05의 홀름 보정에서 12개가 귀무가설을 기각했으며, E3_H3는 기술적 분석으로 내렸다. 실험 1에서 Direct-CoT와 MCU는 종결점이 있는 사건을 높은 확신으로 완료됐다고 평가하는 지표에서 25.00%포인트 차이가 났다(홀름 보정 p=1.31239e-05). NLI-CoT는 중단되지 않은 비종결 사건에서 91.25%포인트 하락했다(홀름 보정 p=1.81805e-21). 다중 후보 언어화(MCV)는 한 번의 호출에서 가중치가 붙은 추정치 K=5개를 이끌어 낸다. 프롬프트를 비가중 판독(MCU) 및 자체 가중 판독(MCW)과 구분한다. 중국어 표준어(E2)와 영어(E3)의 NLI-CoT에서 중단을 기준으로 한 현실성 역설이 드러났다. 실험 4에서 MCU-CF는 암묵적 무어 문장의 지각된 일관성을 Direct-CoT보다 26.64%포인트 높였다(홀름 보정 p=0.0006). Direct-CF와 MCU-CoT도 Direct-CoT보다 각각 29.15%포인트와 17.31%포인트 높았다. OpenAI 호출 1,800회의 구성 요소 제거 실험과 개발 단계(stage="dev") P16.7의 모델 간 확장 분석에서, 이산 NLI-CoT와 스칼라 Direct-CoT 판단이 모델마다 서로 달라짐을 보였다. 외부 모델 다섯 개에서 계획하고 수집한 단위는 4,240개로, 유효 4,222개, 형식 누락 18개, 전송 누락 0개였다. 구간별 누락률은 2% 미만이었으며 OpenAI gpt-4o-mini는 top_logprobs=20에서 1,000개 모두 유효했다. 확증 결과는 관찰 가능한 프롬프트와 판독 절차에 관한 것이다. 내부 추론의 조기 고착은 가설로 남는다. 코드, 자극 자료, 사전 등록 분석 계획, 검증 도구는 https://github.com/asj252/llm-judgment-studies 에 공개되어 있다.
원문 초록
Natural language entailment and coherence judgments often depend on whether an event merely occurred, reached a telic culmination, satisfied a plan, or was evaluated under multiple pragmatic standards. We test observable consequences of the single-chain premature lock-in hypothesis across four preregistered, sealed formal experiments on Qwen3-8B-Q8_0 (16,640 formal units, temperature=0.0): 15 of 16 hypothesis slots retain confirmatory status (12 rejecting H0 under within-experiment Holm control at alpha_fam=0.05; E3_H3 demoted to descriptive status). In Experiment 1, Direct-CoT vs. MCU differs by 25.00 pp on telic high-confidence completion (Holm p=1.31239e-05), while NLI-CoT collapses by -91.25 pp on uninterrupted atelic items (Holm p=1.81805e-21). Multi-Candidate Verbalization (MCV) elicits K=5 weighted estimates in one call, separating the prompt from unweighted (MCU) and self-weighted (MCW) readouts. Mandarin (E2) and English (E3) expose an Interruption-Anchored Realis Paradox under NLI-CoT. In Experiment 4, MCU-CF raises perceived coherence on implicit Moorean sentences by 26.64 pp over Direct-CoT (Holm p=0.0006), alongside Direct-CF - Direct-CoT = 29.15 pp and MCU-CoT - Direct-CoT = 17.31 pp. A 1,800-call OpenAI ablation and a stage="dev" P16.7 cross-model extension (4,240 planned/collected units across five external models: 4,222 valid, 18 format-missing, 0 transport-missing; <2% missing per slice; OpenAI gpt-4o-mini at top_logprobs=20 achieves 1,000/1,000 valid units) show that discrete NLI-CoT and scalar Direct-CoT judgments dissociate across models. Confirmatory effects concern observable prompt-and-readout protocols; internal premature lock-in remains a hypothesis. All code, stimuli, preregistered analysis plans, and verification tools are available at https://github.com/asj252/llm-judgment-studies.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
- arXiv:2611.22188v1제출 시각 미확인
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.