arXiv:2608.03370v1 cs.CV

DRPFNet: RGB-열화상 객체 검출을 위한 이중 도메인 잔차 점진적 융합 네트워크

DRPFNet: Dual-domain Residual Progressive Fusion Network for RGB-Thermal Object Detection

Zian Wang, Changchun Li

제출 2026-08-04

한국어 초록

RGB-열화상(RGB-T) 객체 검출(object detection)은 가시광선과 열화상 모달리티의 상호보완적 정보를 융합하여 다양한 조명 및 기상 조건에서도 강건한 검출 성능을 달성하는 것을 목표로 한다. 기존 방식들은 주로 어텐션(attention) 메커니즘이나 트랜스포머를 활용해 각 특징(feature) 스케일에서 독립적으로 모달리티 간 융합을 수행하며, 공간 도메인에서 RGB와 열화상 특징을 직접 결합한다. 그러나 이러한 방식들은 여전히 각 스케일의 독립적 융합으로 인한 계층 간 지식 상속의 한계, 양방향 최적화의 부재로 인한 지속적인 잡음 억제의 어려움, 주파수-공간 협업의 결여로 야기되는 정보 저하와 같은 중대한 한계를 안고 있다. 이러한 문제를 해결하기 위해 본 논문에서는 구조, 특징, 강화라는 세 가지 상호작용 수준에서 통합된 정보 흐름 최적화 시스템을 구축하는 이중 도메인 잔차 점진적 융합 네트워크인 DRPFNet을 제안한다. 구조적 수준에서는 상향식 지식 축적과 양방향 강화를 통해 스케일 간 전파를 확립하여 매끄러운 정보 흐름을 보장한다. 특징 수준에서는 주파수 대역 분리와 에지 유도를 통해 RGB 고주파 에지와 열화상 저주파 구조를 협업적으로 추출하여 표현 품질을 보장한다. 강화 수준에서는 에지 유도 기반의 이중 도메인 정제를 통해 전경-배경 식별력을 높여 정밀한 객체 위치 추정을 달성한다. 공개된 두 가지 RGB-T 데이터셋에 대한 광범위한 실험을 통해 제안 방법이 경쟁력 있는 효율성과 함께 뛰어난 성능을 달성함을 입증하여, 이러한 계층적 협업 전략의 유효성을 검증하였다.

원문 초록

RGB-thermal (RGB-T) object detection aims to fuse complementary information from visible and thermal modalities to achieve robust detection under varying illumination and weather conditions. Current methods typically employ attention mechanisms or transformers to perform cross-modal fusion independently at each feature scale, directly combining RGB and thermal features in the spatial domain. However, they still face significant limitations: cross-level knowledge inheritance caused by independent fusion at each scale,suppressing noise continuously due to the lack of bidirectional optimization, and information degradation induced by the absence of frequency-spatial collaboration. To address these issues, we propose DRPFNet, a Dual-domain Residual Progressive Fusion Network that constructs a unified information flow optimization system from three synergistic levels:structure, feature, and enhancement. At the structural level, we establish cross-scale propagation through bottom-up knowledge accumulation and bidirectional enhancement,ensuring smooth information flow. At the feature level, we collaboratively extract RGB high-frequency edges and thermal low-frequency structures via frequency band separation and edge guidance, guaranteeing representation quality. At the enhancement level, we enhance foreground-background discrimination through edge-guided dual-domain refinement,achieving precise object localization.Extensive experiments on two public RGB-T datasets demonstrate that our method achieves competitive performance with competitive efficiency, validating the effectiveness of this hierarchical collaborative strategy.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2608.03370v1제출 시각 미확인

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.