语音转换 (Voice Conversion) 旨在保留语音中语言内容信息的同时,将源说话人音色转变为目标说话人的音色。越来越多的应用场景,如直播、视频会议等实时通信(RTC)应用中要求语音转换能够实时进行,而目前常见的语音转换模型以整段音…
声浪
INTERSPEECH2024 | DualVC 3:利用LM生成伪上下文的端到端低延迟流式语音转换
46 0 0
Interspeech论文介绍 | AnoPatch:从一致性角度提升机器异常声音检测
尽管预训练模型在众多下游任务上有着优秀的表现,其在机器异常声音检测任务上往往表现不佳。本篇论文发现,迁移学习的一致性是异常检测性能的关键因素,包括结构一致性和数据一致性。 因此,研究团队提出了AnoPatch模型,在机器数据上对BEATs音…
29 0 0
微软提出语音合成系统 EmoCtrl-TTS
哇,你听说了吗?微软最近提出了一个超级厉害的语音合成系统,名叫EmoCtrl-TTS! 想象一下,它就像是一个超级厉害的配音演员,不仅能模仿任何人的声音,还能随心所欲地控制情绪。开心的时候哈哈大笑,伤心的时候呜呜哭泣,甚至还能在一句话里从喜…
19 0 0
Speech Com | Whisper-SV:将Whisper自适应于低数据资源的说话人验证
Whisper[1] 是一种在海量语音数据上训练的多任务、多语言语音基座模型,已在语音识别、翻译和语种识别等任务上表现出卓越性能。然而,其在说话人验证(SV)任务中的适用性尚未被探索,特别是在带说话人标签的语音数据有限的低数据资源场景。 近…
20 0 0
开源发布CUSIDE-Array: 清华CAT工具包支持流式多通道端到端语音识别
论文地址:https://arxiv.org/abs/2407.09807 开源代码及模型:https://github.com/thu-spmi/CAT/blob/master/docs/cuside-array.md 摘&
21 0 0
浅谈大模型的多模态和语音流式技术
ChatGPT 引爆LLM的同时scaling law席卷了整个机器学习行业,openai 、meta、google等公司在语音方向也分别推出了whisper、mms、audioPaLM多个语音大模型,在模型和数据规模上再次发挥scalin…
35 0 0
