INTERSPEECH2024 | RaD-Net 2:基于因果性蒸馏和复数轴向自注意力机制的两阶段音质修复模型
INTERSPEECH2024 | RaD-Net 2:基于因果性蒸馏和复数轴向自注意力机制的两阶段音质修复模型

随着手机、笔记本电脑等智能设备的普及,音频通信系统在人们的日常生活中起到了越来越重要的作用。然而,受硬件等多种因素的限制,通信系统中的语音信号经常因频率响应失真、不连续失真、响度问题、混响和噪声等受到损伤,影响听感。在ICASSP 2024…

5 0 0
媲美GPT-4o!复旦推出语音模型 SpeechGPT2
原创2 years ago
媲美GPT-4o!复旦推出语音模型 SpeechGPT2

SpeechGPT2 是由复旦大学计算机学院开发的一个端到端的语音对话语言模型,类似于 GPT-4o。能够感知并表达情感,并根据上下文和人类指令以多种风格提供合适的语音响应。如说唱、戏剧、机器人、搞笑和低语等。 项目地址:https://0…

13 0 0
IEEE SPL | MMGER:利用大语言模型改进口音和语音识别的多模态多粒度生成式错误纠正方法
IEEE SPL | MMGER:利用大语言模型改进口音和语音识别的多模态多粒度生成式错误纠正方法

语音识别(ASR)作为可以准确高效转录语音的技术,已经取得了长足进步。但是当遇到口音等特殊语音条件时,识别错误率急剧攀升。语言模型(LM)可以利用ASR产生的假设(hypothesis)完成错误纠正。最近的一些工作利用大语言模型(LLM)卓…

10 0 0