近日,LAION 发布大规模音频文本数据集 LAION-Audio-XL,以及基于该数据集训练的对比式音频文本预训练模型 CLAP2。 数据集包含 3.65 亿组音频文本对,累计约 139 万小时音频,覆盖人声、音乐、环境音等多种声音类型。…
声浪
现有世界模型大多聚焦于模拟物理现实——给定过去的观测和控制信号,预测场景如何演化。在这个框架里,推理和决策被排除在世界之外,用户通过低自由度的信号从外部控制,世界内部没有主体。 团队认为,完整的世界模型不仅需要模拟物理场景,还需要内部承载能…
语音 AI 的下一关,不只是“听懂一句话”,更是“接住一段对话”。 真实的人类交流中,犹豫、停顿、附和、打断与语音重叠无处不在。对于 Voice Agent 而言,除了理解说话内容,还需要判断何时回应、何时倾听,以及如何自然地参与对话。 而…
Higurashi AI 开源了 4B 参数的 Haru-4B,这是一个能够同时听和说的全双工连续语音对话基础模型,无需等待用户说完再开始回应。模型从 4,000 万小时真实语音中学习附和、打断和话轮交替等对话行为,不依赖 LLM 或 TT…
今日,阿里通义千问发布了 Qwen4 系列的首个模型 Qwen4-Max。 据官方介绍,该模型基于Qwen4系列全新架构,拥有2.4万亿总参数,具备原生视觉能力,支持百万token上下文窗口,目前已上线千问AI平台对外提供API服务。 Bl…
11月13日,腾讯混元发布全新实时语音模型 Hy Realtime。新模型在语音理解、指令遵循、拟人化表达等基础对话能力上有显著提升,同时新增Agentic工具调用与唱歌能力。目前,Hy Realtime已在元宝语音通话、腾讯客服等产品上线…
闽南语广泛使用于我国福建、台湾及东南亚华人社区,在日常交流中有其独特的词汇和表达方式。在影视剧、有声书、娱乐节目等真实媒体中,闽南语语音还呈现出多样的说话风格和录音条件。要让语音系统听懂、说好闽南语,需要足够大、足够贴近真实场景的数据;但现…
今天,AI降临派(Adventists AI)正式开源全双工语音模型 Sophon-Realtime v1,在魔搭社区首发。跟它说话,像跟人打电话一样:你说话时它一直在听,你一停它就接上;你随时插话,它马上停下来回答你的新问题。 和多数语音…
Wuli-Art 发布了基于 MiniMax-H3 的少步音视频生成模型 MiniMax-H3-Turbo,提供 4、6、8 步三个固定步数版本,支持文生音视频与首帧条件生成,配套工作流支持可选尾帧。模型采用轨迹蒸馏、DMD 和 GAN 相…
大语言模型已经开始逐字生成回答,语音助手却迟迟不开口,原因可能出在 TTS:它仍要等完整文本,才能生成声音。流式 TTS 在文本陆续到达时开始合成,前面的音频播放时,后面的内容还在生成。 这种需求在语音对话中尤其明显:上游 LLM 还在生成…
