arXiv:2611.19389v1 eess.AS

Pixel-KWS: 표기 변형에 강건한 개방 어휘 키워드 검출을 위한 렌더링 글리프 표현

Pixel-KWS: Rendered-Glyph Representations for Orthographically Robust Open-Vocabulary Keyword Spotting

Adarsh Arigala, Ramesh Gundluru, Srinivasan Umesh, Ludovick Lepauloux, Hakim Hacid

제출 2026-11-17

한국어 초록

개방 어휘 키워드 검출(KWS)은 추론 시 사용자가 임의의 키워드를 등록할 수 있게 한다. 그러나 문자 또는 음소를 사용하는 텍스트 인코더는 학습에서 정한 고정 기호 어휘에 의존한다. 이 때문에 학습에서 보지 못했거나 외형이 비슷한 기호, 예를 들어 동형 문자, 숫자와 기호로 바꿔 쓰는 리트 표기(l33tspeak), 악센트가 붙은 문자를 처리하기 어렵다. 본 연구는 학습한 임베딩을 조회하는 대신 렌더링한 글리프로 문자를 표현하는 개방 어휘 KWS 프레임워크 PIXEL-KWS를 제안한다. 각 문자를 회색조 이미지로 렌더링하고 경량 합성곱 신경망(CNN)으로 인코딩한다. 이렇게 텍스트 인코더는 고정 어휘에 의존하지 않고 시각적 형태를 바탕으로 일반화한다. PIXEL-KWS와 조건을 맞춘 문자 기반 비교 모델은 LibriPhrase-hard에서 각각 등오류율(EER) 9.57%와 9.55%, LibriPhrase-easy에서 0.43%와 0.41%를 기록했다. 사전학습과 합성 데이터 없이 공개된 모든 기준선보다 높은 성능을 냈다. PIXEL-KWS는 동형 문자 및 리트 표기를 통한 기호 수준 교란에 대해 훨씬 강건했다. 이 결과는 글리프 표현이 실제 환경에서 강건한 개방 어휘 키워드 검출을 구현하는 간단하고 효과적인 방법임을 보여 준다.

원문 초록

Open-vocabulary keyword spotting (KWS) allows users to enroll arbitrary keywords at inference time. However, character and phoneme-based text encoders rely on fixed symbol vocabularies learned during training, limiting their ability to handle unseen or visually similar symbols such as homoglyphs, l33tspeak substitutions, and accented characters. We propose PIXEL-KWS, an open-vocabulary KWS framework that represents characters through rendered glyphs rather than learned embedding lookups. We render each character as a grayscale image and encode it with a lightweight CNN, enabling the text encoder to generalize from visual form rather than a fixed vocabulary. On LibriPhrase, PIXEL-KWS and its matched character-based counterpart achieve 9.57% and 9.55% EER on LibriPhrase-hard, 0.43% and 0.41% EER on LibriPhrase-easy, outperforming all published baselines without pre-training or synthetic data. PIXEL-KWS provides substantially greater robustness to both homoglyph and l33tspeak symbol-level perturbations. These results highlight glyph-based representations as a simple and effective approach for robust open-vocabulary KWS in practical settings.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2611.19389v1제출 시각 미확인

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.