Papers with Code · CC BY-SA 4.0

Multimodal Machine Translation

21 평가 기록 7 datasets

Multimodal machine translation is the task of doing machine translation with multiple data sources - for example, translating "a bird is flying over water" + an image of a bird over water to German text.

<span style="color:grey; opacity: 0.6">( Image credit: Findings of the Third Shared Task on Multimodal Machine Translation )</span>

개요는 각 항목의 일부입니다. 위 탭에서 전체 기록을 페이지별로 탐색할 수 있습니다.

벤치마크

Papers with Code 아카이브의 데이터셋별 기록 예시입니다. 평가 조건과 지표 방향이 검증되지 않아 순위를 의미하지 않습니다.

Dataset기록된 모델 예시MetricPaperCode
ERNIE-UniX2
BLEU (EN-DE): 49.3
논문 -
ViTA
BLEU (EN-HI): 44.6
논문 코드
Multimodal BRNN
ALI: 0.81
논문 코드
Multimodal BRNN
ALI: 0.94
논문 코드
Multimodal BRNN
ALI: 0.80
논문 코드
Multimodal BRNN
ALI: 0.81
논문 코드

데이터셋

7개

논문

라이브러리

Papers with Code 리더보드 row에 연결된 구현 저장소입니다.

하위 태스크