Meta推出配音功能,加速AI语言技术布局
快速阅读: Meta推出AI翻译和配音功能,支持Facebook和Instagram Reels英西互译,克隆声音并同步唇形,降低语言障碍,扩大内容覆盖。2024年Connect大会展示,面向千粉以上Facebook创作者和公开Instagram账号。
Meta宣布将扩大其人工智能产品线,在Facebook和Instagram的Reels中推出新的翻译和配音功能,自动在英语和西班牙语之间进行翻译,克隆创作者的声音并同步唇部动作。
创作者可以在发布前激活此功能,选择“使用Meta AI翻译声音”并预览配音版本。翻译后的Reels将标为AI生成,并推荐给偏好该语言的用户。
此次更新适用于拥有至少1000名粉丝的Facebook创作者和所有公开的Instagram账户。随着Meta持续加大对AI产品的投资,该公司在2024年的Meta Connect活动上展示了这一配音功能,以及其他创作者工具,如AI生成的背景和滤镜。新功能展示了Meta将AI直接嵌入创作流程的战略,降低了创作者跨越语言障碍的门槛。
Meta已经开展了几项大规模的语言项目。2023年推出的SeamlessM4T模型支持近100种语言的语音转文本和语音转语音翻译。公司还推出了“不让任何语言落后”项目,提供超过200种语言的高质量翻译。新的配音功能专注于需求最大的英语和西班牙语组合。
Meta在2024年Connect活动中介绍该技术时写道:“我们正在测试一项Meta AI翻译工具,它将自动翻译Reels的音频,让更多人即使使用不同的语言也能享受你的内容。”
2025年2月,Meta再次重申其长期承诺,推出了语言技术合作伙伴计划。“我们寻求合作伙伴,共同推进和扩展Meta的开源语言技术,包括AI翻译技术。”公司表示,“我们的努力特别关注服务不足的语言,以支持联合国教科文组织的工作。”
对于创作者而言,这项工具提供了免费的专业配音或字幕服务替代方案。过去,美国创作者希望吸引西班牙语观众可能需要雇佣翻译或依赖字幕。自动配音使他们能够在不增加制作成本的情况下将内容分发到新地区。
在Instagram上,Reels与TikTok视频争夺注意力,直接用观众偏好的语言交流——即使是通过AI——可以提升观看时间、分享次数和关注量等参与度指标。对于在Facebook上有大量粉丝的创作者,这一功能为他们在拉丁美洲和美国双语社区开辟了机会。
该工具的影响不仅限于个人创作者。品牌可以利用AI配音来本地化产品推广、影响者合作和短视频广告。公司无需制作多个版本的活动,只需发布一个,让Meta的AI处理翻译和配音。
这缩短了全球营销策略的上市时间,有助于Meta将其平台定位为国际广告商更具竞争力的选择。此举符合Meta的整体战略,即留住直接为Instagram和Facebook创作的创作者和品牌,而不是转向其他平台。
然而,任何AI系统都存在风险。翻译准确性无法保证——习语和文化细微差别可能会丢失或扭曲。唇形同步有时可能显得不自然,分散观众注意力。语音克隆也引发了伦理问题。Meta表示视频将带有AI翻译披露,但创作者和观众仍可能担心同意、滥用或深度伪造操纵的可能性。目前,创作者必须手动选择加入,这可能有助于减轻意外使用。
该功能目前仅限于英语和西班牙语,排除了其他主要创作者语言。扩展语言支持将是Meta扩大采用的关键。
未来更新可能会将配音功能扩展到更多语言,并与其他产品集成,如已提供实时翻译功能的Ray-Ban Meta智能眼镜。
Meta 推出了用于 Facebook 和 Instagram Reels 的 AI 动态翻译和配音功能。该功能面向拥有至少 1000 名粉丝的 Facebook 创作者和所有公开的 Instagram 账号。首批支持英语与西班牙语之间的互译,并具备语音克隆和唇形同步技术。Meta 在 2024 年的 Meta Connect 大会上宣布了这一功能,并进行了小范围测试。该技术基于 Meta 的 SeamlessM4T 模型和“无语言遗漏”项目。
企业 IT 方面,品牌可以更轻松地将活动扩展到不同语言市场。风险与机遇并存,创作者可以通过这项技术扩大全球影响力,但也存在关于语音克隆的伦理问题。未来值得关注的方面包括支持更多语言、提高准确性和潜在的企业集成应用。
订阅《创新内幕》通讯,了解最新的科技创新动态,涵盖物联网、5G、手机、安全、智慧城市、人工智能、机器人等领域。每周二和周五发送。
邮箱地址
注册即表示您接受我们的使用条款和隐私政策。您可以随时取消订阅。
(以上内容均由Ai生成)