今日论文合集:CS.SD语音与音频 共 15 篇,本文展示前 8 篇

本文经arXiv每日学术速递授权转载,微信公众号:arXiv_Daily

[机构]信息由AI分析生成,可能存在错误,仅供参考,以论文实际显示为准


快速导航

1. 语音合成与声音生成 1 篇

2. 语音翻译与语音语言模型 2 篇

3. 多模态音频与视听学习 2 篇

4. 数据集、基准与评测 2 篇

5. 安全、隐私与深度伪造音频 1 篇


1. 语音合成与声音生成 | 1 篇

1. ConformalMOS: Uncertainty-Aware MOS Prediction with Conformal Intervals and Ordinal Modeling

ConformalMOS:基于共形区间与序数建模的感知不确定性平均意见得分(MOS)预测

AI 总结:提出ConformalMOS框架,结合共形预测与序数建模,在BVCC数据集上以MSE=0.08的准确率实现可靠的MOS预测,提升TTS和VC部署的不确定性校准与可靠性。

链接:https://arxiv.org/abs/2610.36126

机构:Michigan State University(密歇根州立大学); Clemson University(克莱姆森大学)

作者:Kehinde Elelu, Joshua E. Siegel, Mohammadali Saffary, Tashfain Ahmed, Simeon Babatunde, Ebuka Okpala


2. 语音翻译与语音语言模型 | 2 篇

2. AudioRSI: Recursively Self-Improving Audio Reasoners

AudioRSI:递归自改进音频推理器

AI 总结:提出AudioRSI框架,让音频大语言模型以递归方式自提供奖励,在四个分布外音频推理基准中优于强基线,还发展出结构化推理行为并减少幻觉。

链接:https://arxiv.org/abs/2610.36578

机构:UIUC(伊利诺伊大学厄巴纳-香槟分校)

作者:Jiajun Fan, Roger Ren, Jingyuan Li, Rahul Pandey, Prashanth Gurunath Shivakumar, Ankur Gandhe, Yile Gu, Ge Liu, Ivan Bulyko


3. S3-S2ST: Semantically Supervised Streaming Speech-to-Speech Translation

S3-S2ST:语义监督的流式语音到语音翻译

AI 总结:本研究针对流式语音到语音翻译的决策问题,提出语义监督的S3-S2ST模型,通过语义对齐的流式监督训练翻译与语音生成能力,可调阈值控制质量-延迟权衡,在FLEURS等数据集上取得良好性能,计划发布模型与代码。

链接:https://arxiv.org/abs/2610.36777

机构:X-LANCE Lab, School of Computer Science, Shanghai Jiao Tong University(上海交通大学计算机学院X-LANCE实验室); Shanghai Innovation Institute(上海创新研究院); Alibaba Token Foundry(阿里巴巴Token铸造厂)

作者:Yuxiang Zhao, Zhiyun Fan, Yu Pu, Yanjie An, Yushen Chen, Wenrui Liang, Baiji Liu, Yunchong Xiao, Zhaoci Liu, Keqi Deng, Kai Yu, Zhifu Gao, Xiangang Li, Xie Chen


3. 多模态音频与视听学习 | 2 篇

4. TAC2: Timestamped Audio Captioning as composable functions

TAC2:将带时间戳的音频字幕生成为可组合函数

AI 总结:本研究提出TAC2模型,将带时间戳的音频字幕生成为可组合函数,通过弱教师融合与IIO格式建模构建声学时间线,扩展为TAC2-S后在音频理解与生成监督任务中表现优异。

链接:https://arxiv.org/abs/2610.36568

机构:University of Surrey(萨里大学); Adobe Research(奥多比研究院)

作者:Swapnil Bhosale, Prem Seetharaman, Ke Chen, Haonan Chen, Justin Salamon, Zeyu Jin


5. Tap2Listen: Instant Target Switching for Streaming Audio-Visual Speaker Extraction

Tap2Listen:面向流式视听说话人提取的即时目标切换

AI 总结:本文提出Tap2Listen流式视听说话人提取模型,通过模态分离计算实现0.12毫秒的即时目标切换,在LRS3-2mix测试集上提升SI-SNRi,切换后恢复速度优于基线,可在单CPU核心实时运行。

链接:https://arxiv.org/abs/2610.36643

机构:Sungkyunkwan University(成均馆大学)

作者:Hansol Park, Minkyung Song, Zinu Kim, Yujun Lee, Hoseong Ahn, Hyunjin Choi, Kyuhong Shim


4. 数据集、基准与评测 | 2 篇

6. From Voiceprints to User Entities: Online Speaker-Memory Construction for Multi-User Spoken Agents

从声纹到用户实体:面向多用户口语智能体的在线说话人记忆构建

AI 总结:本文针对多用户口语智能体的用户记忆识别问题,提出EvoSpeakerMem无训练层及LoCoMo-ID基准,实验验证其在SMIIP-TV数据集和LoCoMo-ID基准上的性能提升,同时揭示碎片化与污染的权衡。

链接:https://arxiv.org/abs/2610.36713

机构:School of Artificial Intelligence, The Chinese University of Hong Kong, Shenzhen(香港中文大学(深圳)人工智能学院); Meituan(美团); School of Computer Science, Wuhan University(武汉大学计算机学院)

作者:Yucong Zhang, Cancan Li, Bo Xiao, Ke Zeng, Ming Li


7. SMEBENCH: Benchmarking Neural Music Editing with Synthetized MIDI Edits

SMEBENCH:基于合成MIDI编辑的神经音乐编辑基准测试

AI 总结:本研究推出SMEBench音乐编辑基准,含3600例测试集等,可独立评估相关指标,测试6个编辑系统发现排名指标会显著影响结论。

链接:https://arxiv.org/abs/2610.36715

机构:Mila – Quebec Artificial Intelligence Institute(米拉 - 魁北克人工智能研究所); Université Laval(拉瓦尔大学); National University of Ireland Maynooth(爱尔兰国立梅努斯大学); Concordia University(康考迪亚大学); Univ Toulon(土伦大学); Aix Marseille Univ(艾克斯-马赛大学); CNRS(法国国家科学研究中心); LIS(信息科学实验室); ILLS(语言与言语科学研究所)

作者:Matthieu Cervera, Francesco Paissan, Micael Antunes, Mirco Ravanelli, Ricard Marxer, Cem Subakan


5. 安全、隐私与深度伪造音频 | 1 篇

8. The Content Leash: Mitigating Degenerate Solutions in Invertible Speaker Anonymization

内容约束:缓解可逆说话人匿名化中的退化解

AI 总结:本研究提出内容保留训练约束与验证器泛化策略,提升可逆语音匿名化的隐私-效用权衡与鲁棒性,在未见过的说话人及保留验证器上实现攻击者等错误率显著提升,同时保持语音可懂度与恢复能力。

链接:https://arxiv.org/abs/2610.36768

机构:Islamic University of Technology(伊斯兰科技大学)

作者:Nirjon Mobarak Talukder, Rafid Ahmed, Mohammad Ishrak Abedin, Abu Raihan Mostofa Kamal

受公众号正文长度限制,本文展示前 8 篇,当天共更新 15 篇。完整列表请访问 arXivDaily。