TopBench: 표 형식 질의응답에서의 암시적 예측 추론을 위한 벤치마크
TopBench: A Benchmark for Implicit Predictive Reasoning in Tabular Question Answering
표 형식 질의응답(TQA)에서 단순 검색이 아니라 과거 패턴으로 관측되지 않은 답을 추론해야 하는 암시적 예측 작업을 평가하기 위해 TopBench 벤치마크를 제안하며, 단일점 예측·의사결정·처치 효과 분석·필터링 등 4개 하위 작업에 걸친 779개 샘플로 구성된다. 텍스트 기반 및 에이전트 워크플로우에서 다양한 LLM을 평가한 결과, 현재 모델은 잠재적 예측 의도를 제대로 인식하지 못하고 단순 조회로 기본 동작하는 경향이 있으며, 정확한 의도 중의성 해소가 예측 추론의 전제 조건임을 확인했다.