arXiv:2611.17853v1 cs.CV

DoubleTake: 장문 문서 이해를 위한 시각적 증거의 집중 검증

DoubleTake: Focused Verification of Visual Evidence for Long-Document Understanding

Kejun Xue, Ang Li, Jinghua Tang, Xincheng Wang, Yongbin Gao, Yanghua Xiao, Zhijun Fang

제출 2026-11-13

한국어 초록

장문 문서 질의응답에서 비전-언어 모델은 검색된 페이지에 충분한 증거가 있는데도 오답을 낼 수 있다. 원래 질문으로 해당 페이지를 다시 읽는 방식은 어떤 사실을 확인해야 하는지에 대한 안내를 모델에 거의 제공하지 못한다. 시각적 증거의 집중 검증을 위한 학습 불필요 프레임워크인 DoubleTake를 제안한다. 첫 번째 읽기에서 후보 답변과, 두 번째 읽기의 검색을 안내하는 별도의 증거 기록을 생성한다. 플래너는 두 후보와 이를 뒷받침하는 증거를 비교하여 사실 확인 질문을 구성한다. 검증기는 어느 후보나 증거 기록도 보지 않은 채 원본 이미지로부터 이에 답하고, 추론기는 이 관찰을 사용하여 원래 질문을 해결한다. 고정된 Qwen3-VL-8B-Instruct 백본을 사용할 때, DoubleTake는 네 개의 벤치마크 각각에서 평가된 방법 중 가장 높은 전체 정확도를 달성한다. 동일한 페이지와 동일한 모델 호출 횟수에서, 집중된 사실 질문을 던지는 것이 원래 질문을 다시 던지는 것보다 네 벤치마크 모두에서 더 높은 정확도를 보인다. 코드는 https://github.com/small-code-cat/double_take 에서 확인할 수 있다.

원문 초록

In long-document question answering, a vision-language model can answer incorrectly even when the retrieved pages contain sufficient evidence. Rereading those pages with the original question gives the model little guidance about which fact to check. We introduce DoubleTake, a training-free framework for focused verification of visual evidence. An initial reading produces a candidate answer and a separate evidence record that guides retrieval for a second reading. A planner compares the two candidates and their supporting evidence to formulate a factual question. A verifier answers it from the source images without seeing either candidate or evidence record, and a reasoner uses this observation to resolve the original question. With a frozen Qwen3-VL-8B-Instruct backbone, DoubleTake achieves the highest overall accuracy among the evaluated methods on each of four benchmarks. With the same pages and number of model calls, asking a focused factual question yields higher accuracy on all four benchmarks than asking the original question again. Our code is available at https://github.com/small-code-cat/double_take.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2611.17853v1

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.