短影片神器》Meta发表新AI模型「Emu Video」,输入文字轻松生成动画

社交媒体巨头 Meta 在 11 月 16 日隆重介绍了两款最新的人工智能(AI)生成模型「Emu Video」和「Emu Edit」,前者只要输入文字要求就能轻松生成短动画。
(前情提要:Meta新VR头戴装置「Meta Quest 3」价格厮杀,仅为苹果六分之一)
(背景补充:Meta Quest 3太实用冲击社群!网友熊抱「二次元老婆」大喊过瘾)

本文目录

社交媒体巨头 Meta 在 11 月 16 日的官方文章中,介绍了其两款最新的人工智能(AI)生成模型:首先是「Emu Video」,能够根据文字和图像输入来生成影片剪辑。其次是「Emu Edit」,这个模型专门用於图像操作,其在图像编辑方面的精确性有了显着提升。

简单两步骤自动生成影片

Meta 在文章中介绍演示了「Emu Video」强大的能力,官方解释该模型采用了一种「分解」的训练方法,将训练过程分成两个步骤,以便模型能够对不同的输入做出反应。

首先是基於文字提示生成图像,然後再基於这些文字和生成的图像来生成影片,这种分解的影片生成方法使得影片生成模型的训练更加高效。

Meta 指出,与依赖於一系列深度模型不同,Emu Video 仅使用两个扩散模型来生成分辨率为 512×512、时长四秒、每秒 16 帧的影片。

人人都是图像编辑大师

Meta 的另一款模型 Emu Edit,则专注於图像操作。它让用户轻松移除或添加图像背景,进行颜色和几何变换,以及进行图像的局部和全局编辑。

Meta 透过了电脑视觉任务训练了 Emu Edit,并使用了 1000 万合成图像的数据库,每个数据集包含一个输入图像、任务描述以及目标输出图像。Meta 表示:

我们相信这是迄今为止同业中最大的数据库!

Meta 也表示,Emu Video、Emu Edit 以及类似的新技术虽然无法取代专业艺术家和动画师,但它们可以帮助人们以全新的方式表达自己,从艺术指导设想新概念,为创作者在他们最新的作品增添不一样的想像力。

将深度结合 FB 和 IG?

事实上,在 9 月 28 日的 Meta Connect 大会中 Meta 就已经亮相模型 Emu(Expressive Media Universe),未来可预期该工具会与旗下 Facebook 和 Instagram 深度结合,但目前官方尚未正式宣布具体时间。

未来 Instagram 上将有更多与生成式 AI 结合的社交玩法

📍相关报导📍

苹果MR头盔传6月上市,受益加密代币有哪些?

元宇宙太烧钱》Meta爆裁减Metaverse晶片部门,新推的Quest 3能救?

Meta祭出「台币3千万年薪」找VR人才!法国试图阻止统治元宇宙

Leave a Reply

Your email address will not be published. Required fields are marked *