arXiv:2610.40759v1 cs.SD

TAPE: 범용 오디오 이펙트 표현 학습

TAPE: Learning General Audio Effect Representations

Phillip Long, Yongyi Zang, Qihui Yang, Christodoulos Benetatos, Junfei Liu, Randal Leistikow, Julian McAuley, Perry R. Cook

제출 2026-11-02

한국어 초록

뮤지션과 믹싱 엔지니어는 참조 녹음에서 들리는 신호 처리 체인을 파악한 뒤 이를 새로운 소재에 맞게 적용할 수 있는 경우가 많다. 우리는 처리된 참조 오디오만으로 이러한 처리를 추정하는 TAPE(Transformations of Audio Parameter Embeddings)를 제시한다. 여덟 가지 주요 이펙트 계열의 프로세서를 식별하도록 학습된 인코더가 참조를 임베딩으로 매핑한다. 미분 가능한 디지털 신호 처리(DSP) 체인은 이 임베딩을 한 번의 순전파로 편집 가능한 파라미터로 디코딩하고, 이를 처리되지 않은 다른 녹음에 적용한다. 이 체인의 모듈은 이퀄라이제이션, 컴프레션, 웨이브셰이핑, 작은 잔차 네트워크, 리버브이다. TAPE는 단일 단계 회귀의 기존 최고 성능인 DeepAFx-ST보다 낮은 스펙트럼 오차를 달성하며, ST-ITO와 유사한 체인에 대한 예제별 탐색보다도 낮은 스펙트럼 오차를 달성하면서 그 탐색보다 275$\times$ 빠르게 동작한다. 디코더가 DSP 파라미터를 출력하므로 이 체인은 인과적으로도 실행될 수 있다. 학습된 가중치를 사용한 C++ 구현은 128샘플 버퍼를 실시간보다 1.8$\times$ 빠르게 처리했으며 놓친 데드라인은 없었다.

원문 초록

Musicians and mixing engineers often can decipher the signal processing chain they hear on a reference recording, then adapt it to new material. We present TAPE (Transformations of Audio Parameter Embeddings), which estimates this processing from the processed reference audio alone. An encoder trained to identify processors in eight major effect families maps the reference to an embedding. A differentiable digital signal processing (DSP) chain decodes the embedding into editable parameters in one forward pass and applies them to a different unprocessed recording. Its modules are equalization, compression, waveshaping, a small residual network, and reverberation. TAPE achieves lower spectral error than DeepAFx-ST, the previous state of the art for single-step regression, and lower spectral error than per-example search over a chain approximating ST-ITO's, while running 275$\times$ faster than that search. Because the decoder outputs DSP parameters, its chain can also run causally: a C++ implementation with the trained weights processed 128-sample buffers 1.8$\times$ faster than real time, with no missed deadlines.

제출 이력

확인된 버전만 표시합니다. 전체 제출 이력은 arXiv 원문에서 확인하세요.

  1. arXiv:2610.40759v1제출 시각 미확인

함께 살펴볼 논문

공통 태그를 근거로 연결했습니다. 실제 인용 관계나 논문의 우수성을 뜻하지 않습니다.

공통 태그로 연결된 공개 논문이 아직 없습니다.

토론

이 논문과 연결된 포럼 글이 아직 없습니다.