arXiv:2607.26238v1 cs.CV

엣지 디바이스를 위한 맹금류 종 경량 이미지 분류: 비디오 프레임 추출을 통한 희귀종 데이터셋 확장, 지식 증류 및 TensorRT 배포

Lightweight Image Classification of Raptor Species for Edge Devices: Rare-Species Dataset Expansion via Video Frame Extraction, Knowledge Distillation, and TensorRT Deployment

Takeshi Nishikawa

제출 2026-07-28

한국어 초록

본 연구에서는 풍력 발전기 충돌 저감을 위한 실시간 엣지 배포(edge deployment) 관점에서 경량 맹금류 종 분류를 탐구한다. 304M 파라미터 규모의 DINOv2-L을 교사 모델로 활용하여 세 가지 경량 학생 모델(MobileNetV4, ViT-Small, EfficientNet-B0)로 지식 증류(knowledge distillation)를 수행했다. 유사 종 간의 혼동을 줄이기 위해 비디오 프레임 추출을 통해 참수리(Steller's Sea Eagle) 이미지를 463장에서 2,050장으로 늘리는 등 데이터셋을 12,519장으로 확장했다. 비디오 및 원본 이미지 수준에서 샘플을 분리하여 해당 단위의 소스 누출(source leakage)을 방지하는 그룹 분할 환경에서, 3개 학생 모델의 앙상블은 약 8분의 1 수준의 파라미터만으로 5개 증류 시드에 걸쳐 0.935 ± 0.004의 매크로 재현율(macro recall)을 달성했다(기존 이미지 수준 분할에서는 0.955를 기록하며 교사 모델 매크로 재현율의 97.5%를 유지함). 이전 학습 이미지와 겹치지 않는 1,258장의 하위 집합에서 흰꼬리수리(White-tailed Eagle)의 재현율은 최대 38.6%p 향상되었으며, 참수리로 오분류되는 비율은 전체 오류의 61%에서 15%로 감소했다. NVIDIA Jetson Orin Nano에서 EfficientNet-B0를 TensorRT FP16으로 배포했을 때 호스트-디바이스 전송을 포함하여 이미지당 3.19ms(초당 313장)의 속도를 기록했으며, FP32와의 argmax 일치도는 99.95%에 달했다. 5개 시드 기반의 통제 비교 실험 결과, 지식 증류(교차 엔트로피 단독 대비)나 DINOv2-L에서 DINOv3-L 교사 모델로의 변경 모두 앙상블 수준에서 뚜렷한 성능 향상을 이끌어내지 못했으며, 주된 성능 개선은 데이터셋 확장과 교사 모델 재미세조정(re-fine-tuning)에서 기인함을 확인했다.

원문 초록

We investigate lightweight raptor-species classification for real-time edge deployment in wind-turbine collision mitigation. Using DINOv2-L (304M parameters) as a teacher, we distilled three lightweight students (MobileNetV4, ViT-Small, and EfficientNet-B0). To reduce confusion between closely related species, we expanded the dataset to 12,519 images, including an increase in Steller's Sea Eagle images from 463 to 2,050 via video-frame extraction. Under a group split that separates samples at the video- and source-image level to mitigate source leakage at that granularity, the three-student ensemble achieved a macro recall of 0.935 +/- 0.004 over five distillation seeds (0.955 on a conventional image-level split, retaining 97.5% of the teacher's macro recall) with roughly one-eighth as many parameters. On a subset of 1,258 images disjoint from the former training images, White-tailed Eagle recall improved by up to 38.6 percentage points, while the rate at which it was misclassified as the Steller's Sea Eagle decreased from 61% to 15% of errors. TensorRT FP16 deployment of EfficientNet-B0 on an NVIDIA Jetson Orin Nano achieved 3.19 ms/image including host-device transfer (313 images/s), with 99.95% argmax agreement with FP32. In five-seed controlled comparisons, neither distillation (versus CE-only) nor the change from a DINOv2-L to a DINOv3-L teacher yielded a clear ensemble-level improvement; the primary gains stem from the dataset expansion and teacher re-fine-tuning.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2607.26238v1제출 시각 미확인

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.