unity表情动画与动态捕捉表情

人物表情可以使游戏场景中的人物更加逼真,有趣,而人物表情在3A大作中非常常见,自己独立游戏中正好要使用这个功能,所以探讨下这个问题。

常用的表情动画使用以下这么几种

1骨骼动画,2顶点动画,3uv动画,4贴图动画

第一种骨骼动画,在某些游戏,比如一些商业游戏中会使用这种方法,来模拟脸部表情的变化。因为过多的骨骼会影响效率,所以我不太使用这种方式

unity表情动画与动态捕捉表情_第1张图片


第二种游戏顶点动画改变

应该是最常用的方式,许多日本方面的模型动画软件也是采用这种方式,诸如MikuMikuDance

通过制作3DMAX中的变形器或者Maya中的blendShape,然后在unity3d中SetBlend的数值来改变表情。


自己Demo中的例子

unity表情动画与动态捕捉表情_第2张图片


3.uv动画

unity表情动画与动态捕捉表情_第3张图片

通过修改uv坐标,达到角色表情变化,一般是在贴图模型上,没有做嘴巴的模型,用贴图来显示张口闭口的效果。

		leftEye.GetComponent().materials[0].SetTextureOffset("_MainTex", new Vector2(eyeLeftEmotionNormal.x*1.0f/eyeRowCol.x, (eyeRowCol.y-1-eyeLeftEmotionNormal.y)*1.0f/eyeRowCol.y));
		rightEye.GetComponent().materials[0].SetTextureOffset("_MainTex", new Vector2(eyeRightEmotionNormal.x*1.0f/eyeRowCol.x, (eyeRowCol.y-1-eyeRightEmotionNormal.y)*1.0f/eyeRowCol.y));

4.贴图动画

通过程序来控制模型贴图的更换,材质球更换


人物的表情捕捉

unity表情动画与动态捕捉表情_第4张图片


unity表情动画与动态捕捉表情_第5张图片


主要方法为opencv人脸识别,获取特征点,位移值映射到模型的方法

一开始以为得使用kinect这些设备,后来研究了发现一般的手机摄像头就可以

自己尝试过,确实通过手机摄像头,追踪脸部,获取特征点,最后通过脸部特征点匹配,与图片上本来设置好的特征点进行映射。

就像一张图片对应覆盖到人物脸上,如上图显示的效果




你可能感兴趣的:(unity表情动画与动态捕捉表情)