비전-언어 모델을 이용한 위상 감응형 광 시간 영역 반사 측정의 이벤트 분류
Vision-Language Model-Based Phase-OTDR Event Classification
한국어 초록
위상 감응형 광 시간 영역 반사 측정(Phase-OTDR)은 분산 진동 감지를 가능하게 한다. 다만 신뢰할 수 있는 이벤트 분류에는 전통적으로 많은 주석 데이터가 필요한 완전 지도학습 모델을 사용해 왔다. 본 연구는 퓨샷 학습을 통해 비전-언어 모델(VLM)을 Phase-OTDR 이벤트 인식에 적용할 수 있는지 살핀다. 원시 표본을 단시간 푸리에 변환(STFT)으로 데시벨 크기의 스펙트로그램 모자이크로 바꾼다. 색상을 매핑하고 크기를 조정해 RGB 이미지로 만든 뒤 대조 언어-이미지 사전학습(CLIP) 이미지 인코더로 처리한다. 퓨샷 적응에서는 Tip-Adapter-F의 캐시 키만 최적화하고 두 인코더는 그대로 둔다. 누출을 통제하기 위해 학습 쪽의 지원·검증 풀에 클래스당 이미지 512장을 두고, 고정 평가 세트에 클래스당 120장을 별도로 둔다. 구성 선택에는 평가 세트를 쓰지 않았고 지원 표본을 다르게 뽑아 20회 시험했다. 선택된 구성은 OpenAI 가중치의 ViT-L-14 비전 트랜스포머 인코더와 클래스당 128샷이었다. 별도 평가 세트에서 정확도 96.81 ± 0.42%, 매크로 평균 F1 96.79 ± 0.42%를 달성했다. 여섯 클래스에 걸쳐 레이블이 있는 지원 이미지 96장만 적응에 사용하는 16샷 설정에서도 정확도가 90.17 ± 0.81%였다. Tip-Adapter-F는 제로샷 CLIP과 학습 없는 표준 Tip-Adapter를 모두 뚜렷하게 앞섰다. 프롬프트와 백본을 분석한 결과, 선택한 설정에서 성능은 비전 트랜스포머 인코더를 바꿔도 안정적이었고 프롬프트 문구에 민감하지 않았다. CLIP의 시각 특징은 다른 과제로 전이할 수 있는 구조를 가지며, 가벼운 지원 캐시를 더해 적은 레이블로 Phase-OTDR 이벤트를 분류할 수 있다. 후속 연구를 위해 코드와 이미지 데이터셋을 https://github.com/miralab-ai/vlm-phase-otdr 에 공개한다.
원문 초록
Phase-sensitive optical time-domain reflectometry (Phase-OTDR) enables distributed vibration sensing, but reliable event classification has traditionally relied on fully supervised models that require extensive annotated data. This study examines the adaptability of a Vision-Language Model (VLM) for Phase-OTDR event recognition through few-shot learning. Raw samples are converted into Short-Time Fourier Transform (STFT) dB-magnitude spectrogram mosaics, color-mapped and resized to RGB images, and processed by a Contrastive Language-Image Pre-training (CLIP) image encoder; few-shot adaptation optimizes only the Tip-Adapter-F cache keys, leaving both encoders unchanged. Under a leakage-controlled protocol (train-side support/validation pool of 512 images per class, fixed held-out test of 120 per class, no test-set access during selection, 20 distinct support-sampling trials), the selected configuration (the ViT-L-14 Vision Transformer encoder with OpenAI weights, 128 shots per class) reaches 96.81 +/- 0.42% accuracy and a macro-averaged F1 score of 96.79 +/- 0.42% on the held-out test set; a label-efficient 16-shot setting, that is, 96 labeled support images at adaptation time across the six classes, already attains 90.17 +/- 0.81%. Tip-Adapter-F clearly outperforms both zero-shot CLIP and the standard training-free Tip-Adapter, and prompt and backbone analyses show that performance is stable across Vision Transformer encoders and insensitive to prompt wording at the selected operating point. Overall, CLIP visual features carry a transferable structure that a lightweight support cache turns into a label-efficient Phase-OTDR event classifier. The code and the corresponding image dataset are made publicly available on GitHub to support further research: https://github.com/miralab-ai/vlm-phase-otdr.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
- arXiv:2611.20841v1제출 시각 미확인
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.