Papers with Code 아카이브
Image Captioning
태스크의 하위 분류와 논문·코드·평가·기법·데이터셋을 탐색하세요.
- 하위 태스크
- 8
- 평가표
- 34
- 보존된 평가 기록
- 419
Image Captioning is the task of describing the content of an image in words. This task lies at the intersection of computer vision and natural language processing. Most image captioning systems use an encoder-decoder framework, where an input image is encoded into an intermediate representation of the information in the image, and then decoded into a descriptive text sequence. The most popular benchmarks are nocaps and COCO, and models are typically evaluated according to a BLEU or CIDER metric.
( Image credit: Reflective Decoding Network for Image Captioning, ICCV'19)
논문
이 태스크와 하위 분야의 관련 논문입니다. 실제 성능 비교는 평가 결과에서 확인하세요.
PerceptionDLM: 멀티모달 디퓨전 언어 모델을 통한 병렬 영역 인지
Occ-VLM: 실내 장면 이해를 위한 점유 그라운딩 비전-언어 모델
영상의학을 위한 공간적 그라운딩이 가능한 2D 비전-언어 모델의 확장 가능한 학습
SARLO-80: 전 세계 경사 SAR 언어 광학 80cm 데이터셋
지식 기반 뉴스 이미지 캡셔닝을 위한 계층적 멀티모달 검색
3D CT 리포트 생성을 위한 LLM 적응 재검토: 스케일링과 진단 사전 지식에 대한 연구
인간과 비전-언어 모델 간의 어텐션 정렬
CIAN: 검색 증강 생성을 통한 이벤트 강화 이미지 캡셔닝을 위한 다단계 프레임워크
먼저 보고 나중에 답변하기: 충분성 기반 강화학습을 통한 시각적 증거 사전 정렬
AI 생성 캡션을 활용한 1억 개 이상 은하 이미지의 의미론적 검색
Brain-IT-VQA: 뇌 신호에서 답변으로
Frames2LoRA: 비전-언어 모델을 위한 파라메트릭 비디오 내재화
복잡한 행동 모델링: 비전-언어 모델에서의 다중 성격 구성 및 동적 전환
AIDEN: 시각장애인을 위한 AI 어시스턴트 설계 및 파일럿 연구
전에 본 적 없는: 일관된 비디오 출처 데이터셋으로 진정한 제로샷 구성 이미지 검색 벤치마킹
Language-Guided Contrastive Audio-Visual Masked Autoencoder with Automatically Generated Audio-Visual-Text Triplets from Videos
SAMST: A Transformer framework based on SAM pseudo label filtering for remote sensing semi-supervised semantic segmentation
FedGSCA: Medical Federated Learning with Global Sample Selector and Client Adaptive Adjuster under Label Noise
Leveraging Out-of-Distribution Unlabeled Images: Semi-Supervised Semantic Segmentation with an Open-Vocabulary Model
Mask-aware Text-to-Image Retrieval: Referring Expression Segmentation Meets Cross-modal Retrieval
QUEST: Quality-aware Semi-supervised Table Extraction for Business Documents
HalLoc: Token-level Localization of Hallucinations for Vision Language Models
Robust Unsupervised Adaptation of a Speech Recogniser Using Entropy Minimisation and Speaker Codes
SRPL-SFDA: SAM-Guided Reliable Pseudo-Labels for Source-Free Domain Adaptation in Medical Image Segmentation
A Novel Lightweight Transformer with Edge-Aware Fusion for Remote Sensing Image Captioning
Vision Matters: Simple Visual Perturbations Can Boost Multimodal Math Reasoning
ViCrit: A Verifiable Reinforcement Learning Proxy Task for Visual Perception in VLMs
Better Reasoning with Less Data: Enhancing VLMs Through Unified Modality Scoring
Dense Retrievers Can Fail on Simple Queries: Revealing The Granularity Dilemma of Embeddings
DiscoVLA: Discrepancy Reduction in Vision, Language, and Alignment for Parameter-Efficient Video-Text Retrieval
Segment Concealed Objects with Incomplete Supervision
Edit Flows: Flow Matching with Edit Operations
An Open-Source Software Toolkit & Benchmark Suite for the Evaluation and Adaptation of Multimodal Action Models
GTR-CoT: Graph Traversal as Visual Chain of Thought for Molecular Structure Recognition
MultiMatch: Multihead Consistency Regularization Matching for Semi-Supervised Text Classification
출처: Papers with Code · CC BY-SA 4.0. 아카이브 자료와 새로 수집한 논문은 별도로 관리합니다.