Sequential Transformer for End-to-End Person Search
원문 초록
Person Search aims to simultaneously localize and recognize a target person from realistic and uncropped gallery images. One major challenge of person search comes from the contradictory goals of the two sub-tasks, i.e., person detection focuses on finding the commonness of all persons so as to distinguish persons from the background, while person re-identification (re-ID) focuses on the differences among different persons. In this paper, we propose a novel Sequential Transformer (SeqTR) for end-to-end person search to deal with this challenge. Our SeqTR contains a detection transformer and a novel re-ID transformer that sequentially addresses detection and re-ID tasks. The re-ID transformer comprises the self-attention layer that utilizes contextual information and the cross-attention layer that learns local fine-grained discriminative features of the human body. Moreover, the re-ID transformer is shared and supervised by multi-scale features to improve the robustness of learned person representations. Extensive experiments on two widely-used person search benchmarks, CUHK-SYSU and PRW, show that our proposed SeqTR not only outperforms all existing person search methods with a 59.3% mAP on PRW but also achieves comparable performance to the state-of-the-art results with an mAP of 94.8% on CUHK-SYSU.
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
Person detection and re-identification in open-world settings of retail stores and public spaces
SeCap: Self-Calibrating and Adaptive Prompts for Cross-view Person Re-Identification in Aerial-Ground Networks
MARS: Paying more attention to visual attributes for text-based person search
인물 검색을 위한 확산 모델 사전 지식 활용
Leveraging Prior Knowledge of Diffusion Model for Person Search
인물 검색은 크롭되지 않은 장면 이미지 갤러리 내에서 쿼리 인물을 위치 특정하고 식별함으로써 인물 검출과 재식별을 공동으로 수행하는 것을 목표로 한다. 기존 방법들은 주로 ImageNet 사전학습 백본을 활용하며, 이는 인물 검색에 필요한 복잡한 공간적 문맥과 세밀한 신원 단서를 포착하기에 최적이 아닐 수 있다. 또한 인물 검출과 재식별 모두에 공유 백본 특징에 의존하여, 상충하는 최적화 목표로 인해 차선의 특징이 생성된다. 본 논문에서는 두 하위 작업 간 최적화 충돌을 제거하면서 사전학습된 확산 모델을 활용하는 새로운 프레임워크인 DiffPS(Diffusion Prior Knowledge for Person Search)를 제안한다. 확산 사전 지식의 핵심 특성을 분석하고 세 가지 특화 모듈을 제안한다: (i) 향상된 인물 위치 특정을 위한 Diffusion-Guided Region Proposal Network(DGRPN), (ii) 형태 바이어스를 완화하기 위한 Multi-Scale Frequency Refinement Network(MSFRN), (iii) 텍스트 정렬 확산 특징을 활용하기 위한 Semantic-Adaptive Feature Aggregation Network(SFAN). DiffPS는 CUHK-SYSU와 PRW에서 새로운 최첨단 성능을 달성한다.
Cerberus: Attribute-based person re-identification using semantic IDs
Unsupervised Visible-Infrared ReID via Pseudo-label Correction and Modality-level Alignment
토론
이 논문과 연결된 포럼 글이 아직 없습니다.