原文:盘一下最近爆火刷屏的3大AI视频项目 - 开始加速的未来|疯狂|动画|字节|ai|静态图_网易订阅
从PIKA爆火之后,AI视频项目开始井喷式爆发。
不管是学术界的,还是产品界的,都像在人们的眼光聚焦在AI视频上时,来推出自己的东西。
割韭菜的也有,但是学术真正牛逼的东西更多。
有3个令我映像非常深刻,也在我群里和朋友圈里刷屏的三个项目:
阿里的Animate Anyone
字节跳动的MagicAnimate
微软的GAIA
字节和阿里都是AI动画的项目,纯竞品,后面细说。微软的GAIA是照片说话。
一个一个说:
阿里研究院上周四出的一个AI动画项目,一张人物静态图+一个骨骼动画,就能生成一段人物的动画。
这玩意我直接放图吧,放图比文字来的直观。
我甚至都不用文字描述太多,应该都能看出来对动漫、影视、游戏领域冲击有多大吧?
特别是最后一个图。正常来说,你想做一个3维人物的动作,是需要绑骨骼、刷权重的,一堆恶心活。现在你直接拉个骨骼K个帧,渲一张人物的 T-pose静态图,AI一下,啪,完事了。。。
你可以想象到对这些行业的降本增效有多大?
而且,Animate Anyone在人物的一致性和画面的稳定性上,表现极佳。
应该能看出来,这稳定性就挺离谱的。
但是。注意,但是来了。
阿里他吧。。。不提供项目demo也不提供代码。。。
他总是这样,甩了个宣传出来。。。然后就没有然后了。。。
所以虽然刷屏了,但是也就看看得了,有兴趣的可以收藏一下他们的Github,没事跟踪一下。万一这货出产品了呢?
地址:https://github.com/HumanAIGC/AnimateAnyone
你看这名字,你都能看出来,是Animate Anyone的竞品了吧?
而且这玩意最骚的一点在于:
他,放,demo,了!
对你没看错,他娘的他放demo和代码了!
字节打阿里,哎你放宣传片是吧,那我就让大家直接上手用,哎我就恶心你。
当然享福的那肯定就是用户了。
说实话,这玩意效果也挺离谱的。
支持多人,但是咋说呢,面部和手部问题挺大,效果不如阿里的AnimateAnyone。
再放一点网友的整活:
优点就是代码放出来了,可能会有大佬去魔改,同时可以体验。
MagicAnimate的地址:https://github.com/magic-research/magic-animate
Huggingface上的在线测试地址:https://huggingface.co/spaces/zcxu-eric/magicanimate
上周五的一个相当惊喜的项目,类似奇妙元、Heygen、D-ID,让“照片说话”的东西。
但是整体效果非常惊艳。直接放图。
比如直接照片+语音驱动。
然后是直接照片+视频驱动。
他们还支持控制头部, 通过用手工制作的姿势或从另一个视频中提取的姿势来控制头部姿势吗, 同时嘴唇运动与语音内容同步。
接下来是最屌的部分,他居然支持文字生成脸部情绪!
比如“悲伤”、“张开嘴”或“惊讶”等文字提示来指导视频生成。
悲伤:
惊喜:
相当离谱的效果。你可以想象一下,以后再影视、短剧等等的应用场景里面,这种技术会有多离谱的应用。
当然,还有诈骗。
这是我目前看到的最牛逼效果最好的照片说话项目。但跟阿里一样,目前弊端就是:非公开。
但是在项目的主页上也写了:Code (Coming Soon),也就是代码即将推出。估计很快就能试用了。
项目地址:https://microsoft.github.io/GAIA/
作为一名AI发烧友和创作者。
这应该是第一次看到AI视频类项目极其密集的喷涌而出,逐渐接近的未来,正在加速。
一天一变,这真不是空话。
你看AI,才能感受到,这个行业变化的有多块。
相连的未来,那个疯狂的未来,你已经能看见一些雏形了。
不要被时代甩下。
然后重返过去。
多看看,也并没有什么坏处。
以上,既然看到这里了,如果觉得不错,随手点个赞、在看、转发三连吧,如果想第一时间收到推送,也可以给我个星标⭐~谢谢你看我的文章。