arXiv:2611.22499v1 cs.CL

음절 표현에서 제스처 생성을 거쳐 조음으로: 스파이킹 신경 모델

From syllable representation via gesture generation to articulation: A spiking neural model

Bernd J. Kr\"oger

제출 2026-11-18

한국어 초록

말을 생성하려면 음운 표현을 서로 조율된 성도 움직임으로 바꿔야 한다. 신경공학 프레임워크(NEF)와 의미 포인터 아키텍처(SPA)에 기반한 스파이킹 신경 감각운동 모델을 제시한다. 각 음절이 나타날 때 신경 진동자 하나가 대응한다. 변하는 위상이 음절의 조음 동작을 조율하고 다음 음절을 시작한다. 위상에 따라 달라지는 명령은 모음, 구강 협착, 연구개·인두, 성문 동작을 담당하는 서로 다른 신경 집단을 활성화한다. 신경 램프 적분기는 동작 활성의 상승과 하강을 조절한다. 이렇게 얻은 궤적은 조음 목표와 함께 조음 운동의 범위와 시간 경과를 정한다. 서로 반대 작용을 하는 신경 집단이 기하학적 조음 모델에 제어 신호를 보낸다. 참조 녹음 30건은 어휘 단어 여덟 개, 그중 한 단어의 다른 발음, 음절 시퀀스 하나, 개별 음절로 구성된 입력 말뭉치를 포괄한다. 신경 구현이 달라져도 활성화가 일관되는지 평가하기 위해, 단어 두 개와 음절 시퀀스 하나를 다루는 짝지은 추가 시뮬레이션 하위 말뭉치 두 개를 사용했다. 각 말뭉치에는 실행 60회가 포함됐다. 램프의 변화율 계수를 고정하고 동작 명령의 진폭을 조정하자 정해진 기준을 만족한 실현이 60회 중 57회에서 60회로 늘었다. 이 모델은 주어진 위상 규칙에서 신경 진동자와 램프의 동역학이 조음 타이밍을 어떻게 생성하는지 보여 준다. 순서가 있는 음절 인터페이스로 앞서 개발한 심성 어휘 모델을 보완한다. 모든 구성 요소의 연속 온라인 실행과 음향 확장 모듈 연결은 후속 통합 과제다. 공개 코드를 사용하고 동기화된 시각화를 통해 신경 활성화 궤적과 그에 따른 성도 움직임을 살펴볼 수 있다.

원문 초록

Speech production requires a transformation from phonological representations into coordinated vocal-tract movements. This paper presents a spiking neural sensorimotor model within the Neural Engineering Framework and Semantic Pointer Architecture. Each syllable occurrence has a neural oscillator whose evolving phase coordinates its gestures and initiates the next syllable. Phase-dependent commands recruit separate neural populations for vocalic, oral-constriction, velopharyngeal, and glottal actions (gestures). Neural ramp integrators shape the rise and fall of gesture activation. Together with articulatory targets, these trajectories determine the extent and time course of articulatory movements. Opponent neural populations provide control signals to a geometric articulatory model. Thirty reference recordings cover an input corpus of eight lexical words, an alternative realization of one word, a syllable sequence, and isolated syllables. Two additional paired simulation subcorpora of sixty runs each, covering two words and one syllable sequence, assess activation reliability across neural realizations. Adjusting gesture command amplitudes increased successful realizations from 57/60 to 60/60 under the specified criteria, with ramp rate factors held constant. The model demonstrates how neural oscillator and ramp dynamics generate articulatory timing under specified phasing rules. It complements a preceding mental-lexicon model through an ordered syllable interface. Continuous online execution across all components and connection to the acoustic extension remain further integration steps. Accessible code and synchronized visualization support inspection of the neural activation trajectories and resulting vocal-tract movements.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2611.22499v1제출 시각 미확인

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.