【LUMIERE】Google 高质量视频生成AI ——1月24号重磅来袭
LUMIERE
- 关于LUMIERE
- 功能介绍
-
- 亮点1：文本到视频和图像到视频
- 亮点2：画风迁移
- 亮点3：运动蒙板
- 亮点4：视频编辑
- 亮点5：视频修复
- 总结
关于LUMIERE
2024年1月24号，Google宣布了一款超高品质的视频生成AI“Lumiere”。
链接: LUMIERE
功能介绍
亮点1：文本到视频和图像到视频
现在有许多能够通过输入文本或图片生成视频的AI存在，但这些AI中的大多数都采用了“生成多帧并在帧之间进行插值”的方法来生成视频，这使得帧与帧之间的连接往往显得不自然。而Lumiere则采用了“一次性生成整个视频帧”的方法，使得帧与帧之间的连接自然流畅，生成的视频更少违和感。Lumiere能够生成的视频帧率为16fps，视频长度为5秒。
亮点2：画风迁移
在以下的例子中，保持了“贴纸风格中绘制的树木”这一风格，同时生成了关于鸭子、蝴蝶等不同主题的视频。
这是一个保持“熔化的黄金”风格来生成视频的例子。
亮点3：运动蒙板
静态图片变动画，哪里想动画哪里。
亮点4：视频编辑
支持重绘视频中的任意区域和对象
亮点5：视频修复
能修复视频中缺失的画面
总结
Lumiere AI的功能真的很强大，大家一起来期待一下吧。
现在 （2024年1月26日）Lumiere尚未对外公开，但想要了解更多信息或者想要看到它实际应用的人可以访问Lumiere的网站。网站上公开了许多该模型执行各种任务的演示。
链接: LUMIERE