Papers with Code · CC BY-SA 4.0

Speech-to-Speech Translation

17 평가 기록 3 datasets

Speech-to-speech translation (S2ST) consists on translating speech from one language to speech in another language. This can be done with a cascade of automatic speech recognition (ASR), text-to-text machine translation (MT), and text-to-speech (TTS) synthesis sub-systems, which is text-centric. Recently, works on S2ST without relying on intermediate text representation is emerging.

개요는 각 항목의 일부입니다. 위 탭에서 전체 기록을 페이지별로 탐색할 수 있습니다.

벤치마크

Papers with Code 아카이브의 데이터셋별 기록 예시입니다. 평가 조건과 지표 방향이 검증되지 않아 순위를 의미하지 않습니다.

Dataset기록된 모델 예시MetricPaperCode
TAT
Hokkien→En (Two-pass decoding)
ASR-BLEU (Dev): 13.6ASR-BLEU (Test): 12.5
논문 코드
GenTranslateV2
ASR-BLEU: 32.3
논문 코드
SeamlessM4T Large
ASR-BLEU: 36.5Parameters: 2.3B
논문 코드

데이터셋

3개

논문

라이브러리

Papers with Code 리더보드 row에 연결된 구현 저장소입니다.