PK PyTorchKR Papers
Papers with Code · CC BY-SA 4.0

image-sentence alignment

Multimodal Deep Learning › Multimodal Text and Image Classification › image-sentence alignment 84 평가 기록 12 datasets

Predict the alignment (score) between an image and a sentence.

개요는 각 항목의 일부입니다. 위 탭에서 전체 기록을 페이지별로 탐색할 수 있습니다.

벤치마크

Papers with Code 아카이브의 데이터셋별 기록 예시입니다. 평가 조건과 지표 방향이 검증되지 않아 순위를 의미하지 않습니다.

Dataset기록된 모델 예시MetricPaperCode
ViLBERT 12-in-1
Average Accuracy: 63.2average pairwise accuracy: 75.1
논문 코드
GPT2
pairwise accuracy: 76.9
논문 코드
CLIP
pairwise accuracy: 75.6
논문 코드
ViLBERT 12-in-1
Accuracy (%): 54.3pairwise accuracy: 69.2
논문 코드
ViLBERT 12-in-1
pairwise accuracy: 75.7Accuracy (%): 54.4
논문 코드
ViLBERT 12-in-1
pairwise accuracy: 77.3Accuracy (%): 66.7
논문 코드
ViLBERT 12-in-1
pairwise accuracy: 76.7Accuracy (%): 64.9
논문 코드
ViLBERT 12-in-1
Accuracy (%): 69.2pairwise accuracy: 80.2
논문 코드
ViLBERT 12-in-1
pairwise accuracy: 95.6Accuracy (%): 89.0
논문 코드
CLIP
pairwise accuracy: 88.8
논문 코드
ViLBERT 12-in-1
Accuracy (%): 62.0pairwise accuracy: 72.4
논문 코드
GPT1
pairwise accuracy: 77.2
논문 코드

데이터셋

12개
VALSEVALSE actant swapVALSE action replacementVALSE coreference cleanVALSE coreference standardVALSE counting adversarialVALSE counting balancedVALSE counting small numbersVALSE existenceVALSE foil-it (noun phrases)VALSE pluralityVALSE spatial relations

논문

라이브러리

Papers with Code 리더보드 row에 연결된 구현 저장소입니다.

github.com/heidelberg-nlp/valse 1 논문