Transferring a Semantic Representation for Person Re-Identification and Search
원문 초록
Learning semantic attributes for person re-identification and description-based person search has gained increasing interest due to attributes' great potential as a pose and view-invariant representation. However, existing attribute-centric approaches have thus far underperformed state-of-the-art conventional approaches. This is due to their non-scalable need for extensive domain (camera) specific annotation. In this paper we present a new semantic attribute learning approach for person re-identification and search. Our model is trained on existing fashion photography datasets -- either weakly or strongly labelled. It can then be transferred and adapted to provide a powerful semantic description of surveillance person detections, without requiring any surveillance domain supervision. The resulting representation is useful for both unsupervised and supervised person re-identification, achieving state-of-the-art and near state-of-the-art performance respectively. Furthermore, as a semantic representation it allows description-based person search to be integrated within the same framework.
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
인물 검색을 위한 확산 모델 사전 지식 활용
Leveraging Prior Knowledge of Diffusion Model for Person Search
인물 검색은 크롭되지 않은 장면 이미지 갤러리 내에서 쿼리 인물을 위치 특정하고 식별함으로써 인물 검출과 재식별을 공동으로 수행하는 것을 목표로 한다. 기존 방법들은 주로 ImageNet 사전학습 백본을 활용하며, 이는 인물 검색에 필요한 복잡한 공간적 문맥과 세밀한 신원 단서를 포착하기에 최적이 아닐 수 있다. 또한 인물 검출과 재식별 모두에 공유 백본 특징에 의존하여, 상충하는 최적화 목표로 인해 차선의 특징이 생성된다. 본 논문에서는 두 하위 작업 간 최적화 충돌을 제거하면서 사전학습된 확산 모델을 활용하는 새로운 프레임워크인 DiffPS(Diffusion Prior Knowledge for Person Search)를 제안한다. 확산 사전 지식의 핵심 특성을 분석하고 세 가지 특화 모듈을 제안한다: (i) 향상된 인물 위치 특정을 위한 Diffusion-Guided Region Proposal Network(DGRPN), (ii) 형태 바이어스를 완화하기 위한 Multi-Scale Frequency Refinement Network(MSFRN), (iii) 텍스트 정렬 확산 특징을 활용하기 위한 Semantic-Adaptive Feature Aggregation Network(SFAN). DiffPS는 CUHK-SYSU와 PRW에서 새로운 최첨단 성능을 달성한다.
YOLOv8과 ResNet18을 이용한 실시간 보행자 속성 인식
Real-time pedestrian attribute recognition with YOLOv8 and ResNet18
보행자 속성 인식(PAR)은 검출된 보행자에 의미적 레이블을 부여하며, 감시, 영상 검색, 인간 중심 그래픽스 응용에 유용하다. 본 논문은 YOLOv8n이 보행자를 검출하고 ResNet18 기반 모델이 성별을 분류하며, 외관상 나이(apparent age)를 추정하고, 각 보행자 crop에서 61개의 이진 속성을 예측하는 2단계 프레임워크를 제시한다. PETA와 PA-100K는 의미적 속성 매핑(semantic attribute mapping)을 통해 결합되어, PETA 속성 공간을 유지하면서 10만 장 이상의 보행자 이미지로 구성된 통합 학습 말뭉치를 만든다. 보고된 테스트 분할에서 시스템은 99.89%의 성별 분류 정확도, 4.23년의 외관상 나이 평균 절대 오차, 89.96%의 다중 속성 정확도, 36.32% macro F1-score, 58.80% micro F1-score를 달성한다. 런타임 측정 결과 NVIDIA RTX 5060 GPU에서 25-30 FPS를 보인다. 결과는 경량 검출기-분류기 파이프라인이 실시간 PAR을 지원할 수 있음을 보여 주며, 낮은 macro F1은 희귀 속성이 여전히 어려움을 나타낸다.
Person Re-Identification System at Semantic Level based on Pedestrian Attributes Ontology
Coarse Attribute Prediction with Task Agnostic Distillation for Real World Clothes Changing ReID
Attribute De-biased Vision Transformer (AD-ViT) for Long-Term Person Re-identification
DMRNet++: Learning Discriminative Features with Decoupled Networks and Enriched Pairs for One-Step Person Search
토론
이 논문과 연결된 포럼 글이 아직 없습니다.