Papers with Code · CC BY-SA 4.0

Video Captioning

114 평가 기록 21 datasets

Video Captioning is a task of automatic captioning a video by understanding the action and event in the video which can help in the retrieval of the video efficiently through text.

<span class="description-source">Source: NITS-VC System for VATEX Video Captioning Challenge 2020 </span>

개요는 각 항목의 일부입니다. 위 탭에서 전체 기록을 페이지별로 탐색할 수 있습니다.

벤치마크

Papers with Code 아카이브의 데이터셋별 기록 예시입니다. 평가 조건과 지표 방향이 검증되지 않아 순위를 의미하지 않습니다.

Dataset기록된 모델 예시MetricPaperCode
mPLUG-2
CIDEr: 80.0METEOR: 34.9ROUGE-L: 70.1BLEU-4: 57.8
논문 코드
MaMMUT
CIDEr: 195.6
논문 코드
VAST
BLEU-4: 18.2CIDEr: 1.99
논문 코드
Vid2Seq
METEOR: 17CIDEr: 28
논문 코드
VALOR
BLEU-4: 45.6CIDEr: 95.8METEOR: 29.4ROUGE-L: 57.4
논문 코드
HiCM²
METEOR: 12.80CIDEr: 71.84BLEU4: 6.11SODA: 10.73
논문 코드
VideoCoCa
ROUGE-L: 35.0BLEU4: 14.7CIDEr: 39.3
논문 -
CEN
CIDEr: 49.87SPICE: 15.76ROUGE-L: 27.90
논문 -
CEN
CIDEr: 63.51ROUGE-L: 31.46SPICE: 19.25
논문 -
Vid2Seq (VidChapters-7M PT)
SODA: 0.151CIDEr: 50.9METEOR: 9.5
- -
SBD_Keyframe
BLEU4: 41.01
논문 -
Shotluck-Holmes (3.1B)
CIDEr: 63.2METEOR: 25.7ROUGE: 36.2BLEU-4: 8.7
논문 코드

데이터셋

21개

논문

라이브러리

Papers with Code 리더보드 row에 연결된 구현 저장소입니다.

하위 태스크