Meta 宣布推出全新 AI 模型,挑战 OpenAI,该模型能生成带声音的视频。

Fri, 04 Oct 2024 15:23:52 GMT

本文中META关注你喜欢的股票创建免费账户Meta首席执行官马克·扎克伯格手持智能手机,在加利福尼亚州门洛帕克的公司总部举行的Meta Connect年度活动上发表主题演讲。2024年9月25日。Manuel Orbegozo | 路透社Facebook母公司Meta周五宣布,已开发出一种名为Movie Gen的新AI模型,该模型能够根据用户提示生成逼真的视频和音频片段,声称其可与OpenAI和ElevenLabs等领先媒体生成初创公司的工具相媲美。Meta提供的Movie Gen创作样本显示,视频中有动物游泳和冲浪的场景,还有利用真人照片展示他们进行绘画等动作的视频。Meta在博客文章中表示,Movie Gen还能生成与视频内容同步的背景音乐和音效,并使用该工具编辑现有视频。在一个视频中,Meta让工具将啦啦队彩球插入沙漠中独自奔跑的男子手中,而在另一个视频中,它将男子滑板所在的停车场从干燥地面变为溅水的泥潭。Meta表示,Movie Gen生成的视频最长可达16秒,音频最长可达45秒。它分享的数据表明,在盲测中,该模型表现优于Runway、OpenAI、ElevenLabs和Kling等初创公司的产品。

这一宣布之际,好莱坞正努力应对如何在今年利用生成式AI视频技术。今年2月,微软支持的OpenAI首次展示了其产品Sora如何根据文本提示创建类似电影的视频。娱乐行业的技术专家渴望使用此类工具来增强和加速电影制作,而其他人则担心采用未经许可训练于版权作品的系统。立法者也强调了对AI生成的假视频或深度伪造在全球选举中使用的担忧,包括在美国、巴基斯坦、印度和印度尼西亚。

Meta发言人表示,公司不太可能像其Llama系列大型语言模型那样公开发布Movie Gen供开发者使用,称其会为每个模型单独评估风险。他们拒绝就Meta对Movie Gen的具体评估发表评论。相反,他们表示,Meta正直接与娱乐界及其他内容创作者合作,探讨Movie Gen的应用,并计划明年将其整合到Meta的自有产品中。根据Meta发布的博客文章和关于该工具的研究论文,公司使用了一系列授权和公开的数据集来构建Movie Gen。

今年,OpenAI一直在与好莱坞高管和代理人会面,讨论可能涉及Sora的合作,尽管这些会谈尚未有任何交易报道。5月,演员斯嘉丽·约翰逊指控ChatGPT制造商未经许可模仿她的声音用于聊天机器人,加剧了对该公司做法的担忧。狮门娱乐公司,即《饥饿游戏》和《暮光之城》的背后公司,于9月宣布将向AI初创公司Runway开放其电影和电视库,以训练AI模型。作为回报,工作室及其电影制作者可以使用该模型来增强他们的作品。

原文链接:https://www.cnbc.com/2024/10/04/meta-announces-new-ai-model-that-can-generate-video-with-sound.html