来源丨AI音频时代

近日，Meta 公司最新推出的Reels短视频AI音频翻译功能有了创造性突破。同一时间Meta正式为Facebook和Instagram的Reels功能推出了AI语音翻译功能。


Meta AI翻译功能最大亮点在于，它采用了先进的AI模型，能够分析创作者的声线、语调。生成的翻译配音保留个人特色，避免机械音问题。
英语创作者翻译成西班牙语时，语气和情感表达与原声高度一致，同时技术还支持唇同步功能。开启后，视频中人物的口型会自动匹配翻译后的语言，解决传统翻译中口型对不上的违和感。
这项技术还能处理双人对话场景，AI能够同步翻译两人对谈内容，并根据对话者音色特性合成与其声线相近的翻译音轨，使视频表现更加自然流畅。

目前，Meta AI翻译率先支持英语与西班牙语的双向互译，未来将逐步增加更多语言选项。

多语言视频制作曾经是资源密集的工作，传统方式需要聘请专业翻译、配音演员和后期制作团队。成本高昂且耗时漫长的问题，这次被Meta新功能彻底改变了格局。

创作者只需点击“用Meta AI翻译你的声音”选项，选择目标语言及是否开启唇同步，即可生成翻译版本。这个功能对Instagram所有公共账号开放，而Facebook创作者则需要拥有1000以上粉丝才能使用。

小型创作者现在能够以接近零成本的方式触及全球受众，这在以前是无法想象的。一位西班牙美食博主可以快速生成英语版本，触达北美观众，英语教育创作者也能轻松进入西班牙语市场。


值得注意的是，和所有自动翻译一样，错误在所难免。Meta 也给出了提升准确度的建议：

  • 系统最多支持两位说话者同时翻译，请尽量避免重叠对话。

  • 尽量降低背景噪音或背景音乐，以提高识别精度。

  • 在新语种中建立受众群相当于“重新开始”，需要一定时间积累。

尽管存在局限，该功能仍能帮助创作者将作品推向全新受众。来源丨AI音频时代