尽管游戏渲染一般都是以照相写实主义作为主要目标,但也有许多游戏使用了非真实感渲染(NPR)的方法来渲染游戏画面。非真实感的一个主要目标是,使用一些方法使得画面和某些特殊的绘画风格相似的效果,例如卡通、水彩风格等。
卡通是游戏中常见的游戏画面有一些共有的特点,例如物体都被黑色的线条描边,以及分明的明暗变化等。要实现卡通渲染有很多方法,其中之一就是使用基于色调的着色技术。我们往往使用漫反射系数对一张一维纹理进行采样,以控制漫反射的色调。卡通风格的高光效果也和我们之前学习的光照不同,卡通风格中,模型的高光往往是一块块分界明显的纯色区域。
除了光照模型不同外,卡通风格通常还需要在物体边缘部分绘制轮廓。之前的文章有介绍使用屏幕后处理技术对屏幕图像进行描边,本节会介绍基于模型的描边方法,实现简单,而且效果不错。
在实时渲染中,轮廓线的渲染是应用非常广泛的一种效果。有下面几种绘制模型轮廓线的方法:
1.基于观察角度和表面法线的轮廓线渲染,这种方法使用视角方向和表面法线的点乘结果来得到轮廓线信息。这种方法简单快速,可以在一个Pass中就得到渲染结果,但局限性很大,很多模型渲染出来的描边效果都不尽如人意。
2.过程式几何轮廓线渲染。这种方法的核心是使用两个Pass渲染,第一个Pass渲染背面的面片,并使用某些技术让它的轮廓可见;第二个Pass再正常渲染正确的面片,优点在于快速有效,并且适用于大多数表面平滑的模型,但它的缺点是不适合类似于立方体这样平整的模型。
3.基于图像处理的轮廓线渲染,这种方法优点在于可以适用于任何种类的模型。但它也有自身的局限所在,一些深度和法线变化很小的轮廓无法被检测出来,例如桌子上的纸张。
4.基于轮廓边缘检测的轮廓线渲染。上面的各种方法,一个最大的问题是,无法控制轮廓线的风格渲染,对于一些情况,我们希望可以渲染出独特风格的轮廓线,例如水墨风等。为此我们希望可以检测出精确的轮廓边,然后直接渲染它们。检测一条边是否是轮廓边的公式很简单,我们只需要检查和这条边相邻的两个三角面片是否满足以下条件:
(n0·v>0)≠(n1·v>0)
其中n0和n1分别表示两个相邻三角面片是否一个朝正面,一个朝背面。我们可以在几何着色器的帮助下实现上面的检测过程。当然这种方法也有缺点,除了实现相对复杂以外,它还会有动画连贯性的问题。也就是说,由于是逐帧单独提取轮廓,所以在帧与帧之间hi出现跳跃性。
5.最后一个种类就是混合了上述的几种渲染方法,例如首先找到精确的轮廓边,把模型和轮廓边渲染到纹理中,再使用图像处理的方法识别出轮廓线,并在图像空间下进行风格化渲染。
下面我们会在unity使用过程式几何轮廓线渲染的方法来对模型进行轮廓描边。我们将使用两个Pass渲染模型:在第一个Pass中,我们会使用轮廓线颜色渲染整个模型背面的面片,并在视角空间下把模型顶点沿着法线方向向外扩张一段距离,以此来让背部轮廓线可见:
viewPos=viewPos + viewNormal *_Outline;
但是如果直接使用顶点法线进行扩展,对于一些内凹的模型,就可能发生背面面片遮挡正面面片的情况。为了尽可能防止出现这样的情况,在扩张背面顶点之前,首先对顶点法线的z分量进行处理,使它们等于一个定值,然后把法线归一化后再对顶点进行扩张。这样的好处在于,扩展后的背面更加扁平化,从而降低了遮挡正面面片的可能性,代码如下:
viewNormal.z=-0.5;
viewNormal=normalize(viewNormal);
viewPos=viewPos+viewNormal*_Outline;
卡通风格中的高光往往是模型上一块块分界明显的纯色区域。为了实现这种效果,不能使用之前的光照模型。之前实现的Blinn-Phong模型的过程中,我们使用法线乘光照方向以及视角方向和的一半,再和另一个参数进行指数操作得到高光反射系数,代码如下:
float spec=pow(max(0,dot(normal,halfDir)),_Gloss);
对于卡通渲染需要的高光反射光照模型,同样需要计算normal和halfDir的点乘结果,不同的是,我们把该值和一个阈值进行比较,如果小于该阈值,则高光反射系数为0,否则返回1。
float spec=dot(worldNormal,worldHalfDir);
spec=step(threshold,spec);
在上面的代码中,我们使用CG的step函数来实现和阈值比较的目的。step函数接受两个参数,第一个参数是参考值,第二个参数是待比较的数值。如果第二个参数大于等于第一个参数,则返回1,否则返回0。
但这种粗暴的判断方法会在高光区域的边界造成锯齿,出现这种问题的原因在于,高光区域的边缘是不平滑渐变的,而是由0突变到1。想要对其进行抗锯齿处理,可以在边界处很小的一块区域内,进行平滑处理。代码如下:
float spec=dot(worldNormal,worldHalfDir);
spec=lerp(0,1,smoothstep(-w,w,spec-threshold));
在上面的代码中,没有像之前一样直接使用step返回0或1,而是首先使用CG的smoothstep函数,其中w是一个很小的值,当spec-threshold小于-w时,返回0,大于w时,返回1,否则在0到1之间进行插值。这样的效果是,我们可以在[-w,w]区间内,即高光区域的边界处,得到一个从0到1平滑变换的spec值,从而实现抗锯齿的目的。尽管我们可以把w设为一个很小的定值,但在本例我们使用邻域像素之间的近似导数值,这可以通过CG的fwidth函数得到。
1.声明属性:
Properties {
_Color ("Color Tint", Color) = (1, 1, 1, 1)
_MainTex ("Main Tex", 2D) = "white" {}
_Ramp ("Ramp Texture", 2D) = "white" {}
_Outline ("Outline", Range(0, 1)) = 0.1
_OutlineColor ("Outline Color", Color) = (0, 0, 0, 1)
_Specular ("Specular", Color) = (1, 1, 1, 1)
_SpecularScale ("Specular Scale", Range(0, 0.1)) = 0.01
}
其中_Pamp是用于控制漫反射色调的渐变纹理,_Outline用于控制轮廓线宽度,_Outline用于控制轮廓线宽度,_OutlineColor对应了轮廓线颜色,_Specular是高光反射颜色,_SpecularScale用于控制计算高光反射时使用的阈值。
2.定义渲染轮廓线需要的Pass,这个pass只渲染背面的三角面片,因此我们需要设置正确的渲染状态:
Pass {
NAME "OUTLINE"
Cull Front
我们使用Cull指令把正面的三角面片剔除,而只渲染背面。
3.定义描边需要的顶点着色器和片元着色器:
v2f vert (a2v v) {
v2f o;
float4 pos = mul(UNITY_MATRIX_MV, v.vertex);
float3 normal = mul((float3x3)UNITY_MATRIX_IT_MV, v.normal);
normal.z = -0.5;
pos = pos + float4(normalize(normal), 0) * _Outline;
o.pos = mul(UNITY_MATRIX_P, pos);
return o;
}
float4 frag(v2f i) : SV_Target {
return float4(_OutlineColor.rgb, 1);
}
在顶点着色器中我们首先把顶点和法线变换到视角空间下,这是为了让描边可以在观察空间达到最好的效果。随后我们设置法线的z分量,对其归一化后再将顶点沿其方向扩张,得到扩张后的顶点坐标。对法线的处理是为了尽可能避免背面扩张后的顶点挡住正面的面片。最后我们把顶点从视角空间变换到裁剪空间。
片元着色器代码非常简单,只需要用轮廓线颜色渲染整个背面即可。
4.然后定义光照模型所在的Pass,以渲染模型的正面:
Pass {
Tags { "LightMode"="ForwardBase" }
Cull Back
CGPROGRAM
#pragma vertex vert
#pragma fragment frag
#pragma multi_compile_fwdbase
5.定义了顶点着色器:
struct v2f {
float4 pos : POSITION;
float2 uv : TEXCOORD0;
float3 worldNormal : TEXCOORD1;
float3 worldPos : TEXCOORD2;
SHADOW_COORDS(3)
};
v2f vert (a2v v) {
v2f o;
o.pos = mul( UNITY_MATRIX_MVP, v.vertex);
o.uv = TRANSFORM_TEX (v.texcoord, _MainTex);
o.worldNormal = UnityObjectToWorldNormal(v.normal);
o.worldPos = mul(unity_ObjectToWorld, v.vertex).xyz;
TRANSFER_SHADOW(o);
return o;
}
我们计算了世界空间下的法线方向和顶点位置,并使用unity提供的内置宏SHADOW_COORDS和TRANSFER_SHADOW来计算阴影所需的各个变量。
6.片元着色器中包含了计算光照模型的关键代码:
float4 frag(v2f i) : SV_Target {
fixed3 worldNormal = normalize(i.worldNormal);
fixed3 worldLightDir = normalize(UnityWorldSpaceLightDir(i.worldPos));
fixed3 worldViewDir = normalize(UnityWorldSpaceViewDir(i.worldPos));
fixed3 worldHalfDir = normalize(worldLightDir + worldViewDir);
fixed4 c = tex2D (_MainTex, i.uv);
fixed3 albedo = c.rgb * _Color.rgb;
fixed3 ambient = UNITY_LIGHTMODEL_AMBIENT.xyz * albedo;
UNITY_LIGHT_ATTENUATION(atten, i, i.worldPos);
fixed diff = dot(worldNormal, worldLightDir);
diff = (diff * 0.5 + 0.5) * atten;
fixed3 diffuse = _LightColor0.rgb * albedo * tex2D(_Ramp, float2(diff, diff)).rgb;
fixed spec = dot(worldNormal, worldHalfDir);
fixed w = fwidth(spec) * 2.0;
fixed3 specular = _Specular.rgb * lerp(0, 1, smoothstep(-w, w, spec + _SpecularScale - 1)) * step(0.0001, _SpecularScale);
return fixed4(ambient + diffuse + specular, 1.0);
}
首先计算了光照模型中需要的各个方向矢量,并对它们进行了归一化处理。然后计算了材质的反射率albedo和环境光照ambient。接着使用内置的UNITY_LIGHT_ATTENUATION宏来计算当前世界坐标下的阴影值。随后我们计算了半兰伯特漫反射系数,并和阴影值相乘得到最终的漫反射系数。我们使用这个漫反射系数对渐变纹理_Ramp进行采样,并将结果和材质的反射率、光照颜色相乘,作为最后的漫反射光照。我们使用fwidth对高光区域的边界进行抗锯齿处理,并将计算而得的高光反射系数和高光反射颜色相乘,得到高光反射的光照部分,最后还使用了step(0.0001,_SpecularScale),这是为了在_SpecularScale为0时,可以完全消除高光反射的光照,最后返回环境光照、漫反射光照和高光反射光照叠加的结果。