PyTorchKR Papers

최신 논문

총 3편
태그·기간 등 상세 필터

카테고리 탐색

로그인 후 이 태그 구독

arXiv:2607.23096v1cs.CV

SHReg: 구면 조화 함수를 통한 엄격한 회전 등변성 포인트 클라우드 정합

SHReg: Strictly Rotation-Equivariant Point Cloud Registration via Spherical Harmonics

포인트 클라우드 정합(point cloud registration)은 임의의 3D 회전에 대해 구별력이 있으면서도 견고한 국소 특징에 크게 의존한다. 기존 학습 기반 방법들은 일반적으로 취약한 국소 기준 좌표계(local reference frames)나 광범위한 데이터 증강을 통해 회전 불변성(rotation invariance)을 근사하며, 이는 경험적 불변성만을 제공하고 보지 못한 회전 변환에서 성능이 저하되는 경우가 많다. 본 논문에서는 $SO(3)$의 표현 이론(representation theory)에 기반한 엄격한 회전 등변성(strict rotation-equivariance) 포인트 클라우드 정합 프레임워크인 SHReg를 제안한다. 국소 기하학적 특징을 $SO(3)$의 기약 표현(irreducible representations)으로 나타냄으로써, SHReg는 국소 기준 좌표계에 의존하지 않고 임의의 회전에 대한 정확한 등변성(equivariance)을 보장한다. 구면 조화 함수(spherical harmonics) 기반의 등변 백본 위에 구축된 SHReg는, 견고한 대응 매칭(correspondence matching)을 위한 회전 불변 디스크립터와 세밀한 방향 정보를 보존하는 회전 등변 특징을 공동으로 학습한다. 보존된 등변 구조는 각 대응이 강체 변환(rigid transformation)을 직접 가설화할 수 있게 하여, 기존 RANSAC 기반 파이프라인에서의 대규모 가설 샘플링에 대한 의존을 줄이고, 어려운 회전 변화 하에서 견고성을 향상시킨다. 3DMatch, 3DLoMatch, KITTI에서의 광범위한 실험은 SHReg가 정합 정확도에서, 특히 큰 회전 교란 하에서 최신(state-of-the-art) 방법들을 일관되게 능가함을 보여준다.

arXiv:2607.05148v2cs.CV

Fully Rotation-Equivariant Spectral-Spatial Learning for Multispectral Object Detection

Existing multispectral detectors are limited by discrete spectral processing, a scale-dependent shift in the relative reliability of spectral and spatial cues across pyramid levels, and the lack of explicit rotation-equivariant geometric priors for arbitrarily oriented objects. To tackle these limitations, we propose FressDet, a fully rotation-equivariant spectral-spatial learning framework for multispectral object detection, capable of capturing the continuous, ordered nature of spectral structure and enabling reliable spectral-spatial fusion across pyramid levels under arbitrary in-plane rotations. FressDet integrates three complementary components. Spectral Implicit Warp (SpeIW) enables query-based spectral resampling via a coordinate-conditioned implicit field, yielding a monotone, order-preserving warp. Rotation-Equivariant Consistency Weighting (ReCoW) adaptively fuses spectral and spatial branches based on branch reliability, reinforcing informative cues while suppressing noise across pyramid levels. The oriented-aware head exploits group-indexed features to stably predict oriented objects without parameter replication. Taken together, FressDet learns more discriminative and robust spectral-spatial representations even under rotational perturbations. By achieving state-of-the-art performance with 93% fewer parameters on five public benchmarks, FressDet demonstrates its effectiveness and generalizability.

arXiv:2606.24330v1cs.CV

REDI-Match: 효율적이고 강건한 밀집 매칭을 위한 회전 등변 지식 증류

REDI-Match: Rotation-Equivariant Distillation for Efficient and Robust Dense Matching

비전 파운데이션 모델(VFM)은 밀집 특징(feature) 매칭을 크게 발전시켰으나, 심각한 평면 내 회전(in-plane rotation)은 여전히 핵심적인 난제로 남아 있다. 기존 해법들은 근본적인 딜레마에 직면해 있는데, 데이터 기반 방법은 회전을 암묵적으로 학습하기 위해 비효율적인 매개변수(parameter) 스케일링을 필요로 하는 반면, 엄격한 등변(equivariant) 네트워크는 최신 VFM의 시맨틱(semantic) 표현 능력을 갖추지 못한다. 이에 따라 현재 프레임워크들은 대체로 VFM을 고정(freeze)한 채 회전 일반화의 부담 전체를 다운스트림 디코더에 전가한다. 이러한 구조적 병목을 해소하기 위해, 우리는 새로운 회전 등변 지식 증류(Rotation-Equivariant Distillation, REDI) 패러다임에 기반한 효율적 프레임워크 REDI-Match를 제안한다. REDI는 회전 대응 관계를 확립하기 위한 데이터 증강(data augmentation)에 의존하는 대신, VFM의 비등변 시맨틱 표현을 경량의 엄격한 회전 등변 인코더로 증류하며, 등변 기하학적 아키텍처를 활용하여 강건한 고차원 시맨틱을 제약한다. 이 특징(feature)들을 최대한 활용하기 위해, 디코더에는 엔트로피 기반 공간 정렬 모듈을 장착한다. 이산 회전 가설을 평가함으로써 이 메커니즘은 정준 좌표계(canonical coordinate system)를 명시적으로 고정하고, 연속적인 정밀화에 앞서 전역적 모호성을 제거한다. 다양한 벤치마크에서의 광범위한 실험을 통해 REDI-Match가 새로운 최첨단(SOTA) 성능을 확립함을 입증한다. 특히 난이도 높은 SatAst 데이터셋(dataset)에서 절대 포즈 정확도를 13.89% 향상시키면서, 현재 SOTA인 RoMa v2 대비 1.9배 빠르게 동작하여 단일 RTX 4090 GPU에서 실시간 추론(inference)(~41 FPS)을 가능하게 한다. 코드: https://github.com/YinjiGe/REDI-Match.