← Visual Question Answering
Papers with Code · CC BY-SA 4.0

MM-Vet v2

아카이브 평가 24건 · 마지막 적재/변경

평가 기록

과거 수집 기록이며 최신 순위가 아닙니다. 데이터셋 버전·split·실험 조건과 지표 방향이 검증되지 않은 결과는 직접 비교할 수 없습니다. 날짜는 논문 날짜이며 최신 평가일을 뜻하지 않습니다.

표가 화면보다 넓으면 좌우로 스크롤하여 논문과 구현 링크를 확인하세요.

원본 기록 순서 · 순위 미부여
모델원본 지표·값논문구현
gemini-2.0-flash-exp
GPT-4 score
77.1±0.1
연결 없음
논문 날짜 미기재
연결 없음
GPT-4o (gpt-4o-2024-11-20)
GPT-4 score
72.1±0.2
GPT-4 Technical Report
2023-03-15
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11
Claude 3.5 Sonnet (claude-3-5-sonnet-20240620)
GPT-4 score
71.8±0.2
Claude 3.5 Sonnet Model Card Addendum
2024-06-24
연결 없음
GPT-4o (gpt-4o-2024-05-13)
GPT-4 score
71.0±0.2
GPT-4 Technical Report
2023-03-15
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11
InternVL2-Llama3-76B
GPT-4 score
68.4±0.3
Params
76B
연결 없음
논문 날짜 미기재
연결 없음
Gemini 1.5 Pro
GPT-4 score
66.9±0.2
Gemini 1.5: Unlocking multimodal understanding across millions of tokens of context
2024-03-08
코드 1
Qwen2-VL-72B (qwen-vl-max-0809)
GPT-4 score
66.9±0.3
Params
72B
Qwen2-VL: Enhancing Vision-Language Model's Perception of the World at Any Resolution
2024-09-18
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8
gpt-4o-mini-2024-07-18
GPT-4 score
66.8±0.3
GPT-4 Technical Report
2023-03-15
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11
GPT-4 Turbo (gpt-4-0125-preview)
GPT-4 score
66.3±0.2
GPT-4 Technical Report
2023-03-15
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11
InternVL2-40B
GPT-4 score
63.8±0.2
Params
40B
연결 없음
논문 날짜 미기재
연결 없음
Gemini Pro Vision
GPT-4 score
57.2±0.2
Gemini: A Family of Highly Capable Multimodal Models
2023-12-19
코드 1
Qwen-VL-Max
GPT-4 score
55.8±0.2
Qwen-VL: A Versatile Vision-Language Model for Understanding, Localization, Text Reading, and Beyond
2023-08-24
코드 1 · 코드 2
Claude 3 Opus (claude-3-opus-20240229)
GPT-4 score
55.8±0.2
연결 없음
논문 날짜 미기재
연결 없음
InternVL-Chat-V1-5
GPT-4 score
51.5±0.2
How Far Are We to GPT-4V? Closing the Gap to Commercial Multimodal Models with Open-Source Suites
2024-04-25
코드 1
LLaVA-NeXT-34B
GPT-4 score
50.9±0.1
Params
34B
연결 없음
논문 날짜 미기재
연결 없음
InternVL-Chat-V1-2
GPT-4 score
45.5±0.1
연결 없음
논문 날짜 미기재
연결 없음
CogVLM-Chat
GPT-4 score
45.1±0.2
CogVLM: Visual Expert for Pretrained Language Models
2023-11-06
코드 1 · 코드 2 · 코드 3 · 코드 4
IXC2-VL-7B
GPT-4 score
42.5±0.3
InternLM-XComposer2: Mastering Free-form Text-Image Composition and Comprehension in Vision-Language Large Model
2024-01-29
코드 1
Emu2-Chat
GPT-4 score
38.0±0.1
Generative Multimodal Models are In-Context Learners
2023-12-20
코드 1
CogAgent-Chat
GPT-4 score
34.7±0.2
CogAgent: A Visual Language Model for GUI Agents
2023-12-14
코드 1 · 코드 2 · 코드 3
LLaVA-v1.5-13B
GPT-4 score
33.2±0.1
Params
13B
Improved Baselines with Visual Instruction Tuning
2023-10-05
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9
LLaVA-v1.5-7B
GPT-4 score
28.3±0.2
Params
7B
Improved Baselines with Visual Instruction Tuning
2023-10-05
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9
Otter-9B
GPT-4 score
23.2±0.1
Params
9B
MIMIC-IT: Multi-Modal In-Context Instruction Tuning
2023-06-08
코드 1 · 코드 2
OpenFlamingo-9B
GPT-4 score
17.6±0.2
Params
9B
OpenFlamingo: An Open-Source Framework for Training Large Autoregressive Vision-Language Models
2023-08-02
코드 1 · 코드 2