심층 학습(deep learning) 기반 방법은 자동 변조 인식(AMR, Automatic Modulation Recognition) 작업에서 높은 정확도를 달성할 수 있지만, 높은 연산 비용으로 인해 정확도와 전력 소비 간의 균형을 맞추기 어려워 자원이 제한된 플랫폼에서의 응용에 한계가 있다. 최근 스파이크 기반 추론(spike-driven inference)을 적은 에너지 예산으로 수행하는 뉴로모픽(neuromorphic) 아키텍처가 비전 및 시계열 작업에 탐색되고 있다. 이러한 연구들에 착안하여, 우리는 AMR을 위한 뉴로모픽 하드웨어 제약 조건에 스파이크 기반 트랜스포머(spike-driven transformer)를 적용하는 새로운 엔드-투-엔드 스파이킹 신경망(SNN, Spiking Neural Network) 아키텍처인 EMRFormer를 제안한다. 이 모델은 유효 정보의 손실을 완화하고 SNN 표현 용량을 향상시키기 위해 적응형 스파이크 인코더(adaptive spike encoder)와 정수형 누설 적분-발화(Integer Leaky Integrate-and-Fire) 뉴런을 통합한다. 스파이크 분리 합성곱 신경망(SSCNN, Spike-Separable Convolution Neural Network)을 스파이크 기반 트랜스포머(SpikeFormer)에 통합함으로써, EMRFormer는 원시 IQ 파형에서 다중 스케일 시간적 특징을 효과적으로 추출한다. 다양한 주류 데이터셋에서 우리의 접근법을 검증한 결과, EMRFormer는 모든 기준 모델을 능가하는 최첨단 정확도를 달성하였다. 또한, 이 모델은 낮은 신호 대 잡음비(SNR) 환경에서도 강력한 성능을 유지하며, 이론적 에너지 소비를 90% 이상 절감한다. 마지막으로 KA200 뉴로모픽 칩에서 모델을 평가한 결과, 3090 GPU 또는 Orin NX에서 실행하는 것과 비교하여 최대 5배의 전력 절감을 달성하였다. 본 연구는 자원이 제한된 장치에서의 AMR을 위한 유망한 경로를 제시한다.
Modulation recognition systems rely on heterogeneous signal representations. 2D signal-image modalities such as time-frequency and cyclostationary maps capture structural patterns, while 1D statistical descriptors such as higher-order power spectra encode complementary cues. Under distribution shift, these modalities degrade unevenly, making robust fusion a central challenge for practical deployment. Progress is further limited by the lack of a unified evaluation protocol that systematically separates different shift types. This paper addresses both challenges through a joint benchmark-and-model study in underwater acoustic modulation recognition. UAMR-ShiftBench is the first benchmark to jointly cover in-distribution, low-SNR, unseen-environment, unseen-communication-parameter, and measured sea-trial evaluation under a single matched protocol, with two independent real-world subsets collected during two sea-trial campaigns conducted in March and November in the South China Sea. SCP-TriCA fuses STFT, cyclostationary, and P2/P4 (second- and fourth-order power spectra) modalities hierarchically: the two 2D modalities are first aligned through bidirectional cross-attention, and the 1D statistical modality is then incorporated through a sample-adaptive selective gate. On UAMR-ShiftBench, SCP-TriCA achieves 95.33% in-distribution accuracy and 74.59% simulated OOD average, outperforming the strongest baseline by 5.12 percentage points, and reaches 91.14% and 94.86% on the two sea-trial subsets, exceeding the best baseline by 15.71 and 23.00 percentage points respectively. Ablation results confirm that the gains stem from modality complementarity and the hierarchical fusion design. Code and models are available at https://github.com/ronglaiqian/UAMR-ShiftBench.