Papers with Code · CC BY-SA 4.0

Zero-Shot Composed Image Retrieval (ZS-CIR)

Image Retrieval › Composed Image Retrieval (CoIR) › Zero-Shot Composed Image Retrieval (ZS-CIR) 204 평가 기록 12 datasets

Given a query composed of a reference image and a relative caption, Composed Image Retrieval (CIR) aims to retrieve target images that are visually similar to the reference one but incorporate the changes specified in the relative caption. The bi-modality of the query provides users with more precise control over the characteristics of the desired image, as some features are more easily described with language, while others can be better expressed visually.

Zero-Shot Composed Image Retrieval (ZS-CIR) is a subtask of CIR that aims to design an approach that manages to combine the reference image and the relative caption without the need for supervised learning.

개요는 각 항목의 일부입니다. 위 탭에서 전체 기록을 페이지별로 탐색할 수 있습니다.

벤치마크

Papers with Code 아카이브의 데이터셋별 기록 예시입니다. 평가 조건과 지표 방향이 검증되지 않아 순위를 의미하지 않습니다.

Dataset기록된 모델 예시MetricPaperCode
CoLLM (finetuned - BLIP-L/16)
R@1: 45.8R@10: 84.7R@50: 95.8
논문 코드
MMRet-MLLM
mAP@10: 43.4
논문 코드
RTD + LinCIR (CLIP G/14)
(Recall@10+Recall@50)/2: 56.74
논문 코드
MagicLens (CoCa L)
(Recall@10+Recall@50)/2: 52.95
논문 코드
OSrCIR (CLIP G/14)
A-R@1: 19.6
논문 코드
iSEARLE-XL (CLIP L/14)
Average Recall: 24.46
논문 코드
iSEARLE-XL-OTI (CLIP L/14)
Actions Recall@5: 32.55
논문 코드
FreeDom (CLIP-L/14)
mAP: 33.24
논문 코드
FreeDom (CLIP-L/14)
mAP: 37.27
논문 코드
FreeDom (CLIP-L/14)
mAP: 26.1
논문 코드
WeiCom (RemoteCLIP)
mAP: 30.19
논문 코드
SEARLE-XL-OTI
R@10: 27.61
논문 코드

데이터셋

12개

논문

라이브러리

Papers with Code 리더보드 row에 연결된 구현 저장소입니다.