← Visual Question Answering
Papers with Code · CC BY-SA 4.0

MM-Vet

아카이브 평가 231건 · 마지막 적재/변경

평가 기록

과거 수집 기록이며 최신 순위가 아닙니다. 데이터셋 버전·split·실험 조건과 지표 방향이 검증되지 않은 결과는 직접 비교할 수 없습니다. 날짜는 논문 날짜이며 최신 평가일을 뜻하지 않습니다.

표가 화면보다 넓으면 좌우로 스크롤하여 논문과 구현 링크를 확인하세요.

원본 기록 순서 · 순위 미부여
모델원본 지표·값논문구현
gemini-2.0-flash-exp
GPT-4 score
81.2±0.4
연결 없음
논문 날짜 미기재
연결 없음
gemini-exp-1206
GPT-4 score
78.1±0.2
연결 없음
논문 날짜 미기재
연결 없음
Gemini 1.5 Pro (gemini-1.5-pro-002)
GPT-4 score
76.9±0.1
Gemini 1.5: Unlocking multimodal understanding across millions of tokens of context
2024-03-08
코드 1
MMCTAgent (GPT-4 + GPT-4V)
GPT-4 score
74.24
MMCTAgent: Multi-modal Critical Thinking Agent Framework for Complex Visual Reasoning
2024-05-28
연결 없음
Claude 3.5 Sonnet (claude-3-5-sonnet-20240620)
GPT-4 score
74.2±0.2
Claude 3.5 Sonnet Model Card Addendum
2024-06-24
연결 없음
Qwen2-VL-72B
GPT-4 score
74.0
Qwen2-VL: Enhancing Vision-Language Model's Perception of the World at Any Resolution
2024-09-18
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8
InternVL2.5-78B
GPT-4 score
72.3
Params
78B
Expanding Performance Boundaries of Open-Source Multimodal Models with Model, Data, and Test-Time Scaling
2024-12-06
코드 1
GPT-4o +text rationale +IoT
GPT-4 score
72.2
Image-of-Thought Prompting for Visual Reasoning Refinement in Multimodal Large Language Models
2024-05-22
연결 없음
Lyra-Pro
GPT-4 score
71.4
Params
74B
Lyra: An Efficient and Speech-Centric Framework for Omni-Cognition
2024-12-12
코드 1
GLM-4V-Plus
GPT-4 score
71.1
CogVLM2: Visual Language Models for Image and Video Understanding
2024-08-29
코드 1 · 코드 2 · 코드 3
Phantom-7B
GPT-4 score
70.8
Phantom of Latent for Large Language and Vision Models
2024-09-23
코드 1
GPT-4o (gpt-4o-2024-05-13)
GPT-4 score
69.3±0.1
GPT-4 Technical Report
2023-03-15
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11
InternVL2.5-38B
GPT-4 score
68.8
Params
38B
Expanding Performance Boundaries of Open-Source Multimodal Models with Model, Data, and Test-Time Scaling
2024-12-06
코드 1
gpt-4o-mini-2024-07-18
GPT-4 score
68.6±0.1
GPT-4 Technical Report
2023-03-15
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11
GPT-4V
GPT-4 score
67.7±0.3
GPT-4 Technical Report
2023-03-15
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11
GPT-4V-Turbo-detail:high
GPT-4 score
67.6±0.1
GPT-4 Technical Report
2023-03-15
코드 1 · 코드 2 · 코드 3 · 코드 4 · 코드 5 · 코드 6 · 코드 7 · 코드 8 · 코드 9 · 코드 10 · 코드 11
Qwen-VL-Max
GPT-4 score
66.6±0.5
Qwen-VL: A Versatile Vision-Language Model for Understanding, Localization, Text Reading, and Beyond
2023-08-24
코드 1 · 코드 2
Gemini 1.5 Pro (gemini-1.5-pro)
GPT-4 score
65.8±0.1
Gemini 1.5: Unlocking multimodal understanding across millions of tokens of context
2024-03-08
코드 1
InternVL2-26B (SGP, token ratio 64%)
GPT-4 score
65.60
Params
26B
A Stitch in Time Saves Nine: Small VLM is a Precise Guidance for Accelerating Large VLMs
2024-12-04
코드 1
Baichuan-Omni (7B)
GPT-4 score
65.4
Baichuan-Omni Technical Report
2024-10-11
코드 1 · 코드 2
InternVL2.5-26B
GPT-4 score
65.0
Params
26B
Expanding Performance Boundaries of Open-Source Multimodal Models with Model, Data, and Test-Time Scaling
2024-12-06
코드 1
Qwen2-VL-7B (finetuned on GAP-VQA train)
GPT-4 score
64.954
Gamified crowd-sourcing of high-quality data for visual fine-tuning
2024-10-05
연결 없음
InternVL2-Llama3-76B
GPT-4 score
64.4
연결 없음
논문 날짜 미기재
연결 없음
Gemini 1.0 Pro Vision (gemini-pro-vision)
GPT-4 score
64.3±0.4
Gemini: A Family of Highly Capable Multimodal Models
2023-12-19
코드 1
GLM4 Vision
GPT-4 score
63.9
CogVLM: Visual Expert for Pretrained Language Models
2023-11-06
코드 1 · 코드 2 · 코드 3 · 코드 4
LLaVA-OneVision-72B
GPT-4 score
63.7
LLaVA-OneVision: Easy Visual Task Transfer
2024-08-06
코드 1 · 코드 2
Lyra-Base
GPT-4 score
63.5
Params
9B
Lyra: An Efficient and Speech-Centric Framework for Omni-Cognition
2024-12-12
코드 1
InternVL2-26B (SGP, token ratio 35%)
GPT-4 score
63.20
Params
26B
A Stitch in Time Saves Nine: Small VLM is a Precise Guidance for Accelerating Large VLMs
2024-12-04
코드 1
InternVL 1.5
GPT-4 score
62.8
Params
26B
How Far Are We to GPT-4V? Closing the Gap to Commercial Multimodal Models with Open-Source Suites
2024-04-25
코드 1
InternVL2.5-8B
GPT-4 score
62.8
Params
8B
Expanding Performance Boundaries of Open-Source Multimodal Models with Model, Data, and Test-Time Scaling
2024-12-06
코드 1