arXiv:2610.09334v1 eess.AS

VM-ARRAYDPS: 비지도 블라인드 음성 분리를 위한 가상 마이크 증강 확산 사후 샘플링

VM-ARRAYDPS: Virtual Microphone Augmented Diffusion Posterior Sampling for Unsupervised Blind Speech Separation

Jingqi Sun, Haozhan Tang, Shulin He, Zhong-Qiu Wang

제출 2026-10-07

저자 비고

arXiv Comments

Submitted to ICASSP 2027 and currently under review

한국어 초록

블라인드 음원 분리(BSS)는 음원이나 혼합 과정에 대한 사전 지식 없이 혼합 신호로부터 여러 음원 신호를 분리하는 것을 목표로 하는 신호 처리 분야의 근본적인 문제입니다. 독립 벡터 분석(IVA)과 같은 전통적인 접근 방식은 음원의 통계적 독립성을 활용합니다. 최근에는 강력한 생성적 사전 확률(generative prior)을 활용하여 확산(diffusion) 기반 접근 방식이 유망한 대안으로 떠올랐습니다. 그중 ArrayDPS는 BSS 문제를 사후 샘플링(posterior sampling) 문제로 정의하고, 사전학습된 음성 확산 모델을 활용하여 깨끗한 음원 신호의 복원을 유도합니다. 분리 성능을 뒷받침하는 핵심 요소는 추정된 음향 전달 함수를 통해 추정된 음원 신호가 관측된 마이크 혼합 신호를 재구성하도록 강제하는 다채널 일관성(MC) 목표입니다. 그러나 어레이 내 마이크의 수는 종종 제한되어 있어 ArrayDPS의 성능을 제약합니다. 이러한 문제를 해결하기 위해, 본 논문에서는 더 높은 신호 대 잡음비(SNR)를 갖는 가상 마이크로 마이크 어레이를 증강하는 새로운 방법인 VM-ArrayDPS를 제안합니다. 이 가상 마이크들은 추가적인 MC 제약 조건을 제공하여 분리 성능을 향상시킬 수 있습니다. 실험 결과는 VM-ArrayDPS가 2인 화자 및 3인 화자 데이터셋 모두에서 ArrayDPS를 크게 능가함을 보여주며, BSS 성능을 개선하는 데 있어 가상 마이크 증강의 효과성을 입증합니다. 또한 가상 마이크의 수와 가상 마이크가 가져오는 MC 목표의 가중치가 미치는 영향을 보여주기 위해 어블레이션 연구(ablation study)도 수행했습니다.

원문 초록

Blind Source Separation(BSS) is a fundamental problem in signal processing, aiming to separate multiple source signals from their mixtures without prior knowledge of the sources or the mixing process. Traditional approaches, such as Independent Vector Analysis (IVA) exploits statistical independence of sources. Recently, diffusion-based approaches have emerged as a promising alternative by leveraging powerful generative priors. Among them, ArrayDPS formulates BSS problem as a posterior sampling problem, and utilizes a pretrained speech diffusion model to guide the recovery of clean source signals. A key factor behind its separation capability is the multi-channel consistency (MC) objective, which enforces the estimated source signals to reconstruct the observed microphone mixtures through the estimated acoustic transfer functions. However, the number of microphones in the array is often limited, which constrains the performance of ArrayDPS. To address this issue, we propose VM-ArrayDPS, a novel method that augments the microphone array with virtual microphones with higher-SNR, these microphones can offer extra MC constraints to enhance the separation performance. Experimental results demonstrate that VM-ArrayDPS significantly outperforms ArrayDPS on both 2-speaker and 3-speaker datasets, showcasing the effectiveness of virtual microphone augmentation in improving BSS performance. We also did ablation studies to show the influence of the number of virtual microphones and weight of the MC objective brought by virtual microphones.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2610.09334v1

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.