语音技术研究公司ElevenLabs筹集了8000万美元B轮融资，由Andreessen Horowitz、Nat Friedman、Daniel Gross共同领投，红杉资本、SV Angel、Smash Capital、BroadLight Capital和Credo Ventures跟投，巩固其在语音人工智能研究和产品领域的市场地位。

自公开发布以来，ElevenLabs在自然语音合成领域一直处于行业领先地位，使用户能够创建和设计跨多种语言和口音的人工智能语音，并能够传递各种情感和语调。自成立以来，ElevenLabs的用户已经生成了100多年的音频，而公司员工也从5名增加到40名。如今，41%的财富500强公司正在使用ElevenLabs技术。
ElevenLabs的技术已被众多垂直行业采用。它使创作者能够通过画外音和人工智能配音来增强观众体验，扩大教育机会，并在有声读物出版、娱乐和个人使用方面提供创新解决方案，包括提高可访问性。这笔资金将用于进一步完善公司的产品供应，同时确保人工智能技术的安全部署。
除了B轮融资公告外，ElevenLabs还公布了几项新产品开发成果，这些产品将在未来几周内上线：

  • 新的配音工作室工作流程使用户能够配音整个电影，以及生成和编辑其转录文字、翻译和时间轴，从而提供对内容制作的控制。这些功能补充了现有的AI配音功能，可实现跨29种语言的自动化端到端视频本地化。

  • 语音库将为用户提供一个安全的平台，让他们可以从自己的语音的人工智能版本中获利。用户可以创建自己的专业AI语音副本，进行验证，并通过语音库进行分享。当其他人使用这些经过验证的声音时，原创者就会获得补偿。用户始终保留对其语音可用性和补偿条款的控制权。

  • 移动应用程序阅读器的早期预览版，可将文本和URL即时转换为音频，使用户在移动时更轻松地访问其他媒体中的内容。作为介绍性试用，该应用程序将在前三个月免费提供，用户将能够通过等候名单注册以提前访问。
2023年，ElevenLabs还扩大了其在多个领域的业务，包括出版、游戏、媒体和对话垂直领域，并与主要媒体公司建立了B2B合作伙伴关系，其中包括：

  • 出版：Storytel、华盛顿邮报、莱茵邮报、Curio

  • 对话式人工智能：FlowGPT、SimpleTalk AI、Ollang、VoiceDrop、Vana、Infinitus AI

  • 媒体和娱乐：Wondershare Filmora、Futuri Media、TheSoul Publishing

  • 游戏：Paradox Interactive、网易、Inworld AI
这些最新产品的发布和合作伙伴关系是在ElevenLabs不断扩展其工具套件（所有工具均由内部研究开发而成）之后的一段时期内推出的。发布的版本包括：用于逼真文本到语音转换的语音合成，以及针对延迟进行优化的Turbo模型；语音设计和语音克隆，用于创建定制语音；语音到语音将一种声音转换为另一种声音。该公司还发布了业界领先的AI配音工具，能够自动将音频和视频翻译成29种语言，同时保留原始说话者的声音和情感。该公司还将很快将目前提供英语版本的Turbo和语音到语音模型扩展到更广泛的语言。
在为这些功能提供支持的研究的基础上，ElevenLabs还致力于开发适用于更复杂工作流程的高级工具，例如用于发布的Projects和用于视频本地化的Dubbing Studio。Projects为出版商简化了编辑、构建、导航和生成长篇内容的流程，而Dubbing Studio通过提供对转录、翻译和序列计时的实际控制，帮助为全球观众准备内容。
该公司还开发了面向社区的产品，例如语音库——一个共享人工智能生成的语音的环境。语音库以前仅限于共享使用语音设计工具创建的人工语音，现在允许用户共享他们自己使用专业语音克隆制作的经过验证的语音副本，作为新推出的语音库市场的一部分，并在其他人使用它们时赚钱。为了确保市场的安全性和完整性，ElevenLabs 使用其专业语音克隆技术来创建高保真语音副本。在分享语音之前，用户必须通过语音验证码，在特定的时间范围内阅读文字提示，以确认自己的语音与训练样本匹配。这一过程，加上ElevenLabs团队的审核和手动批准，可确保真实的、经过用户验证的声音得到共享和货币化，从而创建一个更安全、更值得信赖的环境。
ElevenLabs的核心优先事项是人工智能的安全和负责任的开发，重点是启用检测以确保所有人工智能生成的内容都可清晰识别。该公司去年推出了人工智能语音分类器；一个可以验证音频样本是否包含ElevenLabs生成的内容的工具。今年，该公司将致力于增强分类器的能力，以覆盖更多语音人工智能模型，并与其他分发平台合作以实现更广泛的实施。ElevenLabs正在积极开发额外的保障措施，以增强公共领域的安全。
通过本轮B轮投资，ElevenLabs打算巩固其作为语音人工智能研究和产品部署领域全球领导者的地位。这笔资金将用于推进研究、扩大基础设施、开发特定垂直领域的新产品以及加强安全措施，以确保人工智能技术负责任和道德的发展。
ElevenLabs首席技术官Piotr Dąbkowski补充道：“我们团队的奉献精神已经对语音人工智能产生了持久的影响。这笔新资金使我们能够应对更大的挑战，并专注于保持我们在研究和产品开发方面的竞争优势。”
Mati Staniszewski说道：“我们的目标始终如一——通过打破语言和沟通障碍来改变我们与内容互动的方式。我们正在构建尖端技术，使内容可以跨语言和声音访问，使每个人都能与重要的信息和故事联系起来。我们迄今为止所取得的进展证明了我们敬业的团队和投资者，虽然这仍然只是我们旅程的开始，但我们正在共同帮助塑造无障碍和通信的未来。”