谷歌人工智能视频生成器-LUMIERE(未开源)

Google重磅发布视频生成模型Lumiere 据说后续会开源
亮点1.支持文本到视频与图像到视频
亮点2.画风迁移
亮点3.运动蒙版
亮点4.视频编辑
亮点5.视频修复
谷歌人工智能视频生成器-LUMIERE(未开源)_第1张图片
谷歌人工智能视频生成器-LUMIERE(未开源)_第2张图片
谷歌人工智能视频生成器-LUMIERE(未开源)_第3张图片谷歌视频模型可以生成80帧的片段!不仅画质好、质量高,而且时长更长。

谷歌人工智能视频生成器-LUMIERE(未开源)_第4张图片
谷歌人工智能视频生成器-LUMIERE(未开源)_第5张图片

视频局部编辑

这项功能可以让剪辑师快速针对视频画面当中的物体进行替换。
谷歌人工智能视频生成器-LUMIERE(未开源)_第6张图片

视频画面修复

除了修改画面的内容,甚至还可以针对损失局部画面的视频进行填充修补。
谷歌人工智能视频生成器-LUMIERE(未开源)_第7张图片

文本生成视频

除了视频编辑功能,谷歌Lumiere自然也支持从文本生成视频片段
谷歌人工智能视频生成器-LUMIERE(未开源)_第8张图片
谷歌人工智能视频生成器-LUMIERE(未开源)_第9张图片

图像生成视频

谷歌Lumiere另外一个非常好用的功能,便是将静态图像转换为动态视频。
输入提示词「姑娘微笑和眨眼」,戴珍珠耳环的少女从名画中走出,咧嘴笑了起来。
谷歌人工智能视频生成器-LUMIERE(未开源)_第10张图片梵高《星空》,以令人不可思议的方式流动起来。

谷歌人工智能视频生成器-LUMIERE(未开源)_第11张图片

图像风格化迁移生成视频

除了一般的“图生视频”,谷歌Lumiere模型还能根据参考图生成特定风格的动态艺术视频。
比如,传一张夜光蘑菇图,生成各种散发荧光的动物。
谷歌人工智能视频生成器-LUMIERE(未开源)_第12张图片
谷歌人工智能视频生成器-LUMIERE(未开源)_第13张图片

运动笔刷

随意选中静态图当中的某个对象,让它立即动起来。
谷歌人工智能视频生成器-LUMIERE(未开源)_第14张图片
谷歌人工智能视频生成器-LUMIERE(未开源)_第15张图片

全新UNet架构带来的突破

谷歌的这个新架构则是让AI先掌握物体的运动逻辑。采用这种方法,能够以16FPS生成80帧的连贯动画,产生了更多的全局连贯运动。

具体可以在他们官网上了解详情

https://lumiere-video.github.io/

你可能感兴趣的:(实用网站分享,Lumiere,ai)