Papers with Code · CC BY-SA 4.0

Image Retrieval with Multi-Modal Query

225 평가 기록 24 datasets

The problem of retrieving images from a database based on a multi-modal (image- text) query. Specifically, the query text prompts some modification in the query image and the task is to retrieve images with the desired modifications.

개요는 각 항목의 일부입니다. 위 탭에서 전체 기록을 페이지별로 탐색할 수 있습니다.

벤치마크

Papers with Code 아카이브의 데이터셋별 기록 예시입니다. 평가 조건과 지표 방향이 검증되지 않아 순위를 의미하지 않습니다.

Dataset기록된 모델 예시MetricPaperCode
VAST
Text-to-image R@1: 68.0Text-to-image R@10: 92.8Text-to-image R@5: 87.7
논문 코드
X2-VLM (large)
Image-to-text R@1: 98.8Image-to-text R@10: 100Image-to-text R@5: 100Text-to-image R@1: 91.8
논문 코드
InternVL-G
Image-to-text R@1: 95.7Image-to-text R@5: 99.7Image-to-text R@10: 99.9Text-to-image R@1: 85.0
논문 코드
InternVL-G
Image-to-text R@1: 74.9Image-to-text R@5: 91.3Image-to-text R@10: 95.2Text-to-image R@1: 58.6
논문 코드
ReCon
Image-to-text R@1: 80.9Image-to-text R@5: 96.6Image-to-text R@10: 98.8Text-to-image R@1: 65.2
논문 코드
ReCon
Image-to-text R@1: 80.3Image-to-text R@5: 95.3Image-to-text R@10: 97.8Text-to-image R@1: 61.6
논문 코드
ReCon
Image-to-text R@1: 43.1Image-to-text R@5: 68.7Image-to-text R@10: 78.1Text-to-image R@1: 44.9
논문 코드
HarMA (w/ GeoRSCLIP)
Mean Recall: 38.95%Image-to-text R@1: 20.52%text-to-image R@1: 15.84%
논문 코드
HarMA (w/ GeoRSCLIP)
Mean Recall: 52.27%Image-to-text R@1: 32.74%text-to-imageR@1: 25.62%
논문 코드
CLASS (ORMA)
Mean Rank: 17.82Test MRR: 77.4Hits@1: 67.4Hits@10: 93.4
논문 -
VLPCook (R1M+)
Image-to-text R@1: 74.9Text-to-image R@1: 75.6
논문 코드
AlignCMSS
ADD(S) AUC: 91.73
논문 코드

데이터셋

24개

논문

라이브러리

Papers with Code 리더보드 row에 연결된 구현 저장소입니다.

하위 태스크