NeurIPS2024 | 保留说话人与等时特征的语音到语音翻译
端到端语音到语音翻译的研究兴趣和趋势日益高涨。然而，大多数端到端模型都难以超越级联模型，即通过串联语音识别、机器翻译和文本到语音模型的层级式框架。主要挑战来自直接翻译任务的内在复杂性和数据的稀缺性。在本工作中，我们介绍了一种新颖的模型框架…
13 0 0
声浪
端到端语音到语音翻译的研究兴趣和趋势日益高涨。然而，大多数端到端模型都难以超越级联模型，即通过串联语音识别、机器翻译和文本到语音模型的层级式框架。主要挑战来自直接翻译任务的内在复杂性和数据的稀缺性。在本工作中，我们介绍了一种新颖的模型框架…