StRDAN: Synthetic-to-Real Domain Adaptation Network for Vehicle Re-Identification
원문 초록
Vehicle re-identification aims to obtain the same vehicles from vehicle images. This is challenging but essential for analyzing and predicting traffic flow in the city. Although deep learning methods have achieved enormous progress for this task, their large data requirement is a critical shortcoming. Therefore, we propose a synthetic-to-real domain adaptation network (StRDAN) framework, which can be trained with inexpensive large-scale synthetic and real data to improve performance. The StRDAN training method combines domain adaptation and semi-supervised learning methods and their associated losses. StRDAN offers significant improvement over the baseline model, which can only be trained using real data, for VeRi and CityFlow-ReID datasets, achieving 3.1% and 12.9% improved mean average precision, respectively.
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
시뮬레이션 기상 조건에서의 UAV 기반 차량 재식별 벤치마킹
Benchmarking UAV-based Vehicle Re-Identification under Simulated Weather Conditions
UAV 기반 차량 재식별(ReID)은 무인 항공기가 제공하는 유연한 시점과 광역 커버리지 덕분에 교통 감시, 도시 모니터링, 공공 안전 응용 분야에서 유망한 기술로 부상하고 있다. 그러나 UAV 기반 차량 ReID 벤치마크에서 최근의 진전에도 불구하고, 악천후 조건에서 기존 방법들의 강인성은 충분히 연구되지 않은 상태이다. 기상 열화는 항공 이미지에서 신뢰할 수 있는 차량 매칭에 필요한 세밀한 외관 단서에 큰 영향을 미칠 수 있으며, 특히 소형 객체 스케일, 시점 변화, 복잡한 배경 환경에서 더욱 그러하다. 본 논문에서는 CLIP-ReID, MSINet, AdaSP 세 가지 대표적인 최신 차량 ReID 방법을 VRU 및 UAV-VeID 두 UAV 기반 벤치마크에서 통제된 비교 연구로 제시한다. 일관된 강인성 평가를 위해, 원본 아이덴티티와 데이터 분할을 유지하면서 분석적 기상 효과 파이프라인을 사용하여 두 데이터셋의 합성 안개 및 비 변형 버전을 생성하였다. 모든 모델은 동일하게 맑음, 안개, 비 조건에서 학습 및 평가되었다. 실험 결과, 악천후는 두 데이터셋 전반에 걸쳐 검색 성능을 일관되게 저하시켰으며, 거의 모든 설정에서 안개보다 비가 더 큰 성능 저하를 유발하였다. 평가된 방법 중 AdaSP가 가장 강한 강인성을 보여, 안개 및 비 조건에서 VRU-Large에서 각각 93.0% 및 88.5% mAP, UAV-VeID-Test에서 각각 88.7% 및 76.2% mAP를 달성하였다. 전반적으로, 본 연구의 결과는 시뮬레이션된 악천후가 UAV 기반 차량 ReID의 난이도를 크게 높이고, 최신 방법들 간의 명확한 강인성 차이를 드러내며, 향후 항공 ReID 연구에서 기상 인식 모델 설계 및 평가 프로토콜의 필요성을 강조함을 보여준다. 코드는 https://github.com/tranminhvu945/Benchmarking-ReID에 공개되어 있다.
Multimodality Adaptive Transformer and Mutual Learning for Unsupervised Domain Adaptation Vehicle Re-Identification
DriftGuard: 진화하는 유해성 모더레이션을 위한 안전성 인식 다중 모니터 탐지 및 선택적 적응
DriftGuard: Safety-Aware Multi-Monitor Detection and Selective Adaptation for Evolving Toxicity Moderation
자동화된 유해성 검열 시스템은 은어, 변화하는 표적, 단속에 대한 전략적 적응을 통해 유해 행위가 진화하는 동적인 온라인 환경에서 작동한다. 기존의 드리프트 탐지 방법은 흔히 전역적 분포 변화에 초점을 맞추지만, 이러한 신호는 국소적인 유해성 부분공간이나 위험도가 높은 모델 오류 영역에서 나타나는 안전 관련 변화를 놓칠 수 있다. 본 논문은 다중 모니터 드리프트 탐지와 선택적 모델 업데이트를 결합한 안전 인식 적응형 검열 프레임워크인 DriftGuard를 소개한다. 이 프레임워크는 전역 텍스트 드리프트, 정체성 관련 유해성 드리프트, 모델 불확실성, 유해 위험 드리프트, 위음성 위험 드리프트를 추적한다. 안전 관련 변화가 탐지되면, 위음성 가능성이 높은 사례, 정체성 관련 고위험 사례, 위양성 위험 사례, 불확실한 경계 사례를 우선하는 하드 믹스 적응 세트를 사용하여 모델을 업데이트한다. Civil Comments의 시간적 변화와 Jigsaw-to-DynaHate의 데이터셋 간 변화에 대한 실험 결과, 안전 인식 모니터는 전역 드리프트만으로는 놓치는 위험을 탐지한다. 하드 믹스 적응은 무업데이트 및 무작위 균형 베이스라인에 비해 유해 재현율과 정확도를 향상시킨다. 유해 재현율은 Civil Comments에서 0.8453에서 0.8777로, DynaHate에서 0.7107에서 0.8523으로 상승한다. 부트스트랩 분석은 DynaHate에서 안전성 향상이 안정적임을 추가로 보여 주며, 유해 재현율은 0.1418 증가하고 위음성 유병률은 0.0781 감소한다. 종합하면 DriftGuard는 안전 인식 드리프트 탐지를 표적화된 경량 모델 업데이트와 연결하여 더 강건한 적응형 유해성 검열을 가능하게 한다.
위에서 본 프롬프트 기반 개념 분할: 원격 탐사에서 SAM 3의 제로샷 텍스트 및 시각 프롬프팅 평가
Promptable Concept Segmentation from Above: Evaluating Zero-Shot Textual and Visual Prompting of SAM 3 in Remote Sensing
Segment Anything Model 3(SAM 3)와 같은 대규모 파운데이션 모델은 개방형 어휘와 무학습 컴퓨터 비전으로의 전환을 약속한다. 그러나 이러한 모델이 지구 관측 영상의 하향식 기하 구조라는 분포 외 영역으로 일반화하는 능력은 아직 거의 정량화되지 않았다. 우리는 미세 조정 없이 원격 탐사 장면 분류, 객체 탐지, 인스턴스 분할에 걸쳐 SAM 3를 다중 과제로 경험적으로 평가한다. 장면 분류에서는 분리된 이진 존재 헤드(binary presence head)를 독립적인 제로샷 분류기로 재활용한다. 탐지와 분할에서는 텍스트 프롬프트와 시각 프롬프트를 비교하며, 여기서 시각 프롬프트는 분할 대상 이미지 안에 있는 목표 클래스의 실제 인스턴스 하나를 제시한다. 텍스트만 사용하면 성능이 낮고, 시각 프롬프트를 추가하면 정확도가 크게 오르며, 둘을 결합하면 과제에 따라 정확도가 오르기도 하고 내리기도 한다. 또한 동일한 평가 프로토콜에서 SAM 3의 텍스트 전용 성능을 여러 일반 도메인 개방형 어휘 탐지 및 분할 모델과 비교한 결과, 두 벤치마크 모두에서 모든 모델을 앞선다. 그럼에도 시각 프롬프트가 없을 때의 정확도는 여전히 제한적이며, 이는 향후 연구 방향으로서 매개변수 효율적 미세 조정의 필요성을 시사한다.
ODDR: 보상 가이던스를 통한 단일 단계 그림자 제거 확산 모델
ODDR: One-Step Deshadow Diffusion via Reward Guidance
그림자 제거를 위한 심층 학습(deep learning)의 최근 발전은 이미지 품질과 사실성을 크게 향상시켰습니다. 그러나 대부분의 접근 방식은 수집 비용이 많이 들고 장면 다양성이 제한적인 경우가 많은 실제 쌍(paired) 데이터셋에 의존하므로 일반화 성능이 제한됩니다. 이러한 한계를 해결하기 위해, 우리는 실제 쌍으로 구성된 지도학습(supervision)에 의존하지 않고도 효율적이고 충실도 높은 그림자 제거를 달성하는 새로운 프레임워크인 보상 가이던스를 통한 단일 단계 그림자 제거 확산 모델(One-step Deshadow Diffusion via Reward guidance, ODDR)을 제안합니다. 본 연구의 방법은 효율적인 단일 단계 무그림자 재구성을 위해 합성 그림자 데이터로 학습된 기준선(baseline) 모델인 One-step Deshadow Diffusion(ODD)에서 시작합니다. 나아가 우리는 ShadowReward를 사용하여 ODD를 ODDR로 발전시킵니다. 주석(annotation) 작업이 많이 필요한 기존 방식과 달리, ShadowReward는 인간의 주석 없이 전적으로 학습된 그림자 제거용 최초의 보상 모델(reward model)입니다. 이는 질감 왜곡 및 경계 아티팩트와 같이 통제된 품질 저하가 적용된 합성 생성 이미지를 순위화하여 인간의 지각적 판단을 모방하도록 학습합니다. 이러한 보상 기반 미세조정(fine-tuning)을 통해 ODDR은 합성-실제 간 도메인 간극을 좁힐 수 있습니다. 광범위한 실험을 통해 ODD는 실제 쌍 지도학습에 의존하지 않고도 강력한 성능을 달성하며, ODDR은 결과를 더욱 향상시켜 단일 단계 모델로서 더 높은 연산 효율성을 유지하면서도 실제 쌍 데이터로 학습된 완전 지도학습 방식과의 격차를 좁힘을 보여줍니다.
견고하고 설명 가능한 곤충 인증을 위한 배치 불변 스펙트럴 인텔리전스
Batch-Invariant Spectral Intelligence for Robust and Explainable Insect Authentication
식용 곤충은 기존 가축보다 더 적은 토지와 물을 필요로 하고 온실가스를 덜 배출하는 효율적인 대체 단백질원이다. 그러나 이를 식품 공급망에 성공적으로 통합하려면 알레르겐 노출을 관리하고, 위조를 방지하며, 규제 기준을 충족하기 위한 신뢰할 수 있는 종 인증이 필요하다. 근적외선 분광법은 신속한 분석 도구를 제공하지만, 스펙트럼 측정의 배치 간 변동 때문에 학습 중에 보지 못한 생산 배치에 적용하면 성능이 떨어진다. 우리는 Savitzky-Golay 필터링으로 초기화된 학습 가능한 전처리 모듈과, 기울기 반전 층을 통해 연결된 비지도 엔트로피 정규화 보조 분기를 결합한 종단 간 프레임워크인 배치 불변 스펙트럼 네트워크(Batch-Invariant Spectral Network, BISN)를 소개한다. 이 분기는 배치 레이블을 사용하지 않으며, 보조 헤드와 전처리 모듈에 상반되는 엔트로피 기울기를 제공한다. 세 개의 독립적인 생산 배치에서 수집한 세 종(Acheta domesticus, Hermetia illucens, Tenebrio molitor)의 2,700개 스펙트럼을 사용하여, BISN은 평균 leave-one-batch-out 정확도 0.93(표준편차 0.04)을 달성하여 가장 강력한 기준선을 4 퍼센트 포인트 앞선다(p=0.002). 설명 가능한 AI를 활용해 얻은 추가 통찰은 모델의 결정이 모든 폴드에서 일관되게 지질 및 단백질 흡수 영역에 의존함을 확인하며, 이는 예측 성능을 알려진 곤충 생화학과 연결한다. BISN은 통제된 실험실 환경에서 자동화된 곤충 종 인증을 위한 배치 간 강건성과 생화학적 해석 가능성을 모두 다룬다. 소스 코드와 데이터셋은 https://github.com/majharB/bisn 에서 공개되어 있다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.