Meta AI 实现名人声音和口型同步翻译

Meta 的人工智能助手 Meta AI 正在获得一种新的语音模式。

周三上午在门洛帕克举行的 Meta Connect 2024 开发者大会上，Meta 宣布 Meta AI 现在可以在其可用的多个平台上大声回答问题，包括 Instagram、Messenger、WhatsApp 和 Facebook。您可以从多种声音中进行选择，包括 Meta 为此聘请的名人的 AI 克隆声音：奥卡菲娜、朱迪·丹奇女爵士、约翰·塞纳、基根-迈克尔·基和克里斯汀·贝尔。

新的 Meta AI 语音功能不像 OpenAI 为 ChatGPT 推出的高级语音模式，后者极具表现力，能够捕捉到人的语音中的情感语调。相反，它类似于谷歌最近推出的 Gemini Live，先将语音转录，然后由 AI 回答，并使用合成语音大声读出答案。

Meta 指望这些知名人才能够带来改变；据《华尔街日报》报道，Meta 为使用这些名人的形象支付了数百万美元。我们对此持怀疑态度，但在亲自尝试之前，我们暂不做评判。

在 Meta AI 的其他更新中，得益于为该体验提供支持的底层 AI 模型的升级，助手现在能够分析图像。在支持的地区，例如，您可以分享您看到的一朵花的图片，并询问 Meta AI 它是什么种类。或者您可以上传一道菜肴的照片，并请求获取制作它的方法。（请记住，您偶尔会得到错误的答案。）

Meta 还表示，它正在试点一个 Meta AI 翻译工具，用于自动翻译 Instagram Reels 中的语音。该工具为创作者的讲话配音，并自动对口型，模拟另一种语言的声音，并确保口型动作匹配。

Meta 表示，它正从 Instagram 和 Facebook 上的 Reels 翻译“小型测试”开始，目前仅针对来自拉丁美洲的部分创作者在美国发布的英语和西班牙语视频。