RobustSeiz: EEG 발작 검출기의 기록 환경, 잡음 및 적대적 강건성을 감사하기 위한 모델 비종속 프레임워크
RobustSeiz: a model-agnostic framework for auditing the recording-environment, noise and adversarial robustness of EEG seizure detectors
한국어 초록
배경 및 목적: 자동 뇌전도(EEG) 발작 검출기는 깨끗한 연구용 기록에서 검증되지만, 임상 기록은 전극 문제, 장비 설정, 인공물로 인해 변형된다. 발작 치료는 시간이 중요하므로, 이러한 조건에서도 검출기가 신뢰성과 적시성을 유지하는지 검증하였다. 방법: 우리는 학습된 어떤 검출기든 수정하지 않고 감사하는 오픈소스 프레임워크 RobustSeiz를 개발하였다. 이 프레임워크의 새로움은 새로운 검출기가 아니라 평가 파이프라인에 있다. 즉, 통제되고 시드가 지정된 변화(기록 환경, 잡음과 인공물, 최악 사례의 적대적 변화)를 적용하는 모델 비종속 프로토콜, 이벤트 기반 정확도에 발작 개시 시점과 모델 불확실성을 더한 채점, 그리고 깨끗한 기록에 대한 쌍체 통계로 구성된다. 우리는 학습에 사용되지 않은 세 개의 공개 데이터셋에서 네 가지 딥러닝 검출기를 감사하였다. 결과: 강건성은 크게 달랐으며 깨끗한 데이터에서의 정확도와는 무관하였다. 신호 진폭의 5~10%에 해당하는 적대적 변화는 F1 점수를 최대 0.57까지 감소시켰고, 전극 접촉 잡음은 민감도를 0.57에서 0.06으로 조용히 떨어뜨렸다. 변화는 여전히 검출되는 발작을 최대 62초까지 지연시켰다. 정확도와 함께 해석하면, 드롭아웃 확실성은 필터링 변화에서는 떨어졌지만 잡음이 검출을 침묵시키면서 오히려 상승하였으며, 실패의 4분의 1만이 이를 낮추었다. 결론: 깨끗한 데이터에서의 정확도만으로는 신뢰성이나 적시성을 입증할 수 없다. RobustSeiz는 배포 전 강건성 감사를 재현 가능하게 한다.
원문 초록
Background and Objective: Automated electroencephalography (EEG) seizure detectors are validated on clean research recordings, whereas clinical recordings are altered by electrode problems, equipment settings and artifacts. As seizure treatment is time-critical, we tested whether detectors stay reliable and timely under such conditions. Methods: We developed RobustSeiz, an open-source framework that audits any trained detector without modifying it. Its novelty is the evaluation pipeline, not a new detector: a model-agnostic protocol applying controlled, seeded shifts (recording environment, noise and artifacts, worst-case adversarial), scoring that adds onset timing and model uncertainty to event-based accuracy, and paired statistics against clean recordings. We audited four deep-learning detectors on three public datasets unseen in training. Results: Robustness varied widely and was independent of clean accuracy. Adversarial changes of 5-10% of signal amplitude reduced the F1-score by up to 0.57, and electrode-contact noise silently lowered sensitivity from 0.57 to 0.06. Shifts delayed the seizures still detected by up to 62 s. Read with accuracy, dropout certainty fell under filtering shifts but rose as noise silenced detection; only a quarter of failures lowered it. Conclusions: Clean accuracy alone does not establish reliability or timeliness. RobustSeiz makes pre-deployment robustness audits reproducible.
제출 이력
확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.
- arXiv:2609.04007v2제출 시각 미확인
- arXiv:2609.04007v1제출 시각 미확인
함께 살펴볼 논문
공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.
공통 태그로 연결된 공개 논문이 아직 없습니다.
토론
이 논문과 연결된 포럼 글이 아직 없습니다.