TriViewBench: Controlled Complexity Scaling for Multi-View Structural Reasoning in MLLMs
원문 초록
Multimodal Large Language Models (MLLMs) demonstrate strong performance on standard visual question answering benchmarks, yet their scalability under controlled structural complexity remains poorly understood. We introduce TriViewBench, a controlled three-view visual reasoning benchmark constructed from synthetic 3D scenes with explicitly parameterized object count and occlusion. The benchmark contains 1,923 scenes and over 14K Question-Answer (QA) pairs organized into four complexity levels and three reasoning categories: Local Decision, Object Counting, and Global Recovery. We evaluate 18 open- and closed-source MLLMs under a unified prompting protocol. All 18 models exhibit an identical capability hierarchy without exception (Local Decision > Object Counting > Global Recovery), and performance degrades monotonically with complexity: Local Decision tasks decline modestly (12.11% relative drop), while Object Counting degrades substantially (59.14%) and Global Recovery collapses severely (80.02%). Error analysis on Object Counting reveals two mechanistically independent failure modes: single-view tasks are dominated by undercounting due to occlusion blindness, whereas the multi-view task reverses to overcounting due to cross-view identity confusion. Chain-of-Thought (CoT) prompting yields near-zero overall benefit ($Δ= -0.16\%$) and its effect on Global Recovery is strongly capability-gated, suggesting that the bottleneck lies in cross-view spatial representation rather than reasoning strategy. These findings reveal fundamental scalability limitations in current MLLMs and position TriViewBench as a controlled diagnostic framework for analyzing structural reasoning failures.
요약
객체 수와 가림(occlusion)을 독립적으로 조절한 합성 3D 세 시점 장면으로 구성한 TriViewBench를 제안해 18개 MLLM의 다중 시점 구조 추론을 평가했으며, 모든 모델이 Local Decision > Object Counting > Global Recovery 순의 동일한 능력 계층을 보였고 복잡도 증가에 따라 Global Recovery는 80.02% 상대 하락으로 급격히 약화되었다. 사고의 연쇄(CoT) 프롬프팅은 전체적으로 거의 이득이 없었고, 카운팅 오류는 단일 시점 가림 맹점과 다중 시점 동일성 혼동이라는 독립적 실패 양상에서 비롯되어 병목이 추론 전략보다 교차 시점 공간 표현에 있음을 보여준다.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
- arXiv:2606.26029v1제출 시각 미확인
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.