【LUMIERE】Google 高质量视频生成AI ——1月24号重磅来袭

LUMIERE

  • 关于LUMIERE
  • 功能介绍
    • 亮点1:文本到视频和图像到视频
    • 亮点2:画风迁移
    • 亮点3:运动蒙板
    • 亮点4:视频编辑
    • 亮点5:视频修复
  • 总结

关于LUMIERE

2024年1月24号,Google宣布了一款超高品质的视频生成AI“Lumiere”。
链接: LUMIERE

【LUMIERE】Google 高质量视频生成AI ——1月24号重磅来袭_第1张图片

功能介绍

亮点1:文本到视频和图像到视频

现在有许多能够通过输入文本或图片生成视频的AI存在,但这些AI中的大多数都采用了“生成多帧并在帧之间进行插值”的方法来生成视频,这使得帧与帧之间的连接往往显得不自然。而Lumiere则采用了“一次性生成整个视频帧”的方法,使得帧与帧之间的连接自然流畅,生成的视频更少违和感。Lumiere能够生成的视频帧率为16fps,视频长度为5秒。

亮点2:画风迁移

在以下的例子中,保持了“贴纸风格中绘制的树木”这一风格,同时生成了关于鸭子、蝴蝶等不同主题的视频。
【LUMIERE】Google 高质量视频生成AI ——1月24号重磅来袭_第2张图片

这是一个保持“熔化的黄金”风格来生成视频的例子。
【LUMIERE】Google 高质量视频生成AI ——1月24号重磅来袭_第3张图片

亮点3:运动蒙板

静态图片变动画,哪里想动画哪里。
【LUMIERE】Google 高质量视频生成AI ——1月24号重磅来袭_第4张图片

亮点4:视频编辑

支持重绘视频中的任意区域和对象

【LUMIERE】Google 高质量视频生成AI ——1月24号重磅来袭_第5张图片

亮点5:视频修复

能修复视频中缺失的画面
【LUMIERE】Google 高质量视频生成AI ——1月24号重磅来袭_第6张图片

总结

Lumiere AI的功能真的很强大,大家一起来期待一下吧。
现在 (2024年1月26日)Lumiere尚未对外公开,但想要了解更多信息或者想要看到它实际应用的人可以访问Lumiere的网站。网站上公开了许多该模型执行各种任务的演示。
链接: LUMIERE

你可能感兴趣的:(AI,音视频,人工智能)