2024年1月24号,Google宣布了一款超高品质的视频生成AI“Lumiere”。
链接: LUMIERE
现在有许多能够通过输入文本或图片生成视频的AI存在,但这些AI中的大多数都采用了“生成多帧并在帧之间进行插值”的方法来生成视频,这使得帧与帧之间的连接往往显得不自然。而Lumiere则采用了“一次性生成整个视频帧”的方法,使得帧与帧之间的连接自然流畅,生成的视频更少违和感。Lumiere能够生成的视频帧率为16fps,视频长度为5秒。
在以下的例子中,保持了“贴纸风格中绘制的树木”这一风格,同时生成了关于鸭子、蝴蝶等不同主题的视频。
支持重绘视频中的任意区域和对象
Lumiere AI的功能真的很强大,大家一起来期待一下吧。
现在 (2024年1月26日)Lumiere尚未对外公开,但想要了解更多信息或者想要看到它实际应用的人可以访问Lumiere的网站。网站上公开了许多该模型执行各种任务的演示。
链接: LUMIERE