Papers with Code · CC BY-SA 4.0

Zero-Shot Video Question Answer

Video Question Answering › Zero-Shot Video Question Answer 239 평가 기록 17 datasets

This task present the results of Zeroshot Question Answer results on TGIF-QA dataset for LLM powered Video Conversational Models.

개요는 각 항목의 일부입니다. 위 탭에서 전체 기록을 페이지별로 탐색할 수 있습니다.

벤치마크

Papers with Code 아카이브의 데이터셋별 기록 예시입니다. 평가 조건과 지표 방향이 검증되지 않아 순위를 의미하지 않습니다.

Dataset기록된 모델 예시MetricPaperCode
BIMBA-LLaVA-Qwen2-7B
Accuracy: 71.14
논문 코드
Flash-VStream
Accuracy: 72.4Confidence Score: 3.4
논문 코드
Tarsier (34B)
Confidence Score: 3.7Accuracy: 61.6
논문 코드
Tarsier (34B)
Accuracy: 80.3Confidence Score: 4.2
논문 코드
VideoMultiAgent (GPT-4o)
Accuracy: 79.6
논문 코드
Tarsier (34B)
Accuracy: 68.6
논문 코드
Tarsier (34B)
Accuracy: 82.5Confidence Score: 4.4
논문 코드
ENTER
Accuracy: 71.5
논문 -
Gemini 1.5 Pro
Accuracy (%): 81.3
논문 코드
DeVi (Gemini 2.0)
Acc@GQA: 28.9
논문 코드
FrozenBiLM (with speech)
Accuracy: 59.7
논문 코드
BIMBA-LLaVA-Qwen2-7B
Accuracy: 77.88
논문 코드

데이터셋

17개

논문

라이브러리

Papers with Code 리더보드 row에 연결된 구현 저장소입니다.