UE4 Shader 框架（转载）

Trace的空间

关注跨平台次世代游戏开发

• 博客园
• 首页
• 新随笔
• 联系
• 订阅
• 管理

随笔-88  文章-0  评论-69 

关于Shader的跨平台方案的考虑

  Apple 推出 metal后，除了新的metal framewrok外，也多了一种新的shader语言，最近工作也做了一些metal移植的测试，主要还是现有引擎如何可以快速支持metal的解决方案。这里也想对边写写自己的心得。

 

  metal shader的语法特性更接近SM5的hlsl，所以sm4或sm5的hlsl转化成metal shader更简单，性能跟GLES3.1相似，提供了Vextrex shader， Fragment Shader和Computer Shader。加上移动端图形API的新特性的支持，所以使得次世代游戏引擎面向移动端的移植成为了可能 。

 

  像UE4,CE3这种的大型引擎来说，本身shader代码量就很大，要支持多平台，如果写多套shader，不论是在开发还是测试上都会让工作量成倍增加，所以都是选择转化shader的方式来跨平台。 目前常用的shader转化，要么是FXC编译HLSL的字节码转化，要么就是直接源代码之间转化。对HLSL->GLSL而言，用字节码转化更简单。但metal shader不提供字节码的格式，所以字节码转化方式可能是行不通了。UE4在开发时的2年里也搜索过能解决SM5的HLSL转化的跨平台编译器，结果只能自己基于Mesa3D的功能进行扩展，开发了HLSLCC。

  

  目前的几个HLSL->GLSL的方案：

  hlsl2glslfork，由ATI的HLSL2GLSL发展而来，也基于了一部分monoshader的代码（UE3最早就是用的monoshader），shader源代码之间的翻译，问题是只支持DX9风格的HLSL，不支持DX10和DX11的一些语法，也没有geometry shader，tesseliaton shadr和 compute shader，现在Unity3d还是用的这个。

 

   KlayGE的HLSL2GLSL，是从HLSL的字节码转化为GLSL。

 

  UE4的 HLSLCC，通过在他们在GDC2014上的ppt来看，也是受到 glsl-optimizer的设计的影响，这两个都是参考Mesa3D的，不过Mesa3D只是GLSL的分析和转化为Mesa IR，HLSLCC改成了SM5的HLSL的分析功能，并添加了IR->GLSL的converter。并且在UE4.3后，也加入了metal shader的支持。

 

  接下来也是想结合HLSLCC的ppt，说一些自己的看法，HLSLCC的转化流程，是HLSL->AST->IR->GLSL/Metal + ParameterMap，输出使用了 glsl-optimizer一部分功能 ，但实际运行UE4的HLSLCC的时候，还是会有不少问题的。

 

  1.  shader marco，像ue的.usf，ce的.fxc，多少会通过使用宏来做一些shader的条件编译，静态分支处理等等，也就类似uber shader的概念，但基本上没有什么转化工具能搞定那么复杂的工作，而且也经常会有vs,ps的多个Entry函数（Main）写到一个usf文件里的情况，直接整个.usf扔给转化工具也是不现实的，ue和ce的解决方法，还是要经过内部的管理，把每个入口函数的部分独立出来，如UE4就是通过定义Golbalshader子类，自己来设置参数和入口函数名等等。然后独立的shader入口函数进行转化。而#include，#define，#if 一类的 宏和分支的处理，进行转化前要通过，只留下runtime必须的部分，转化成不同平台的shader并编译为cache保存。

  

 

  2.  OGL通过uniform从每帧从CPU->GPU传递参数，为了减少API调用次数，所以DX11提供了const buffer，而ES3.0和metal也提供了uniform buffer的概念，因为对于大型游戏来说，uniform update调用API的数量也是很大一部分消费，所以需要使用const buffer来根据参数更新频率和顺序进行组织，而在不支持这种概念的DX9上，CE3使用了模拟的const buffer来对参数进行缓存重组再进行更新，而UE4虽然直接支持的DX11，但对移动平台ES2.0的设备，没有uniform buffer的特性，他们使用了模拟的Uniform buffer功能（ppt里叫shadow buffer），基于更新频率打包到uniform array。所以，HLSLCC除了输出GLSL外，也有生成Parameter Map的功能。

  3. shader version方面，如果是DX11 HLSL的转化，对hlslcc进行一些修改定制后就可以，本身hlslcc也支持不同版本GL和metal的输出，如果是DX9 风格HLSL的话，就需要进行一些预处理工作了，dx9和dx11的主要变化在semantic，texture和sample的使用上有些变化。例如：

      

Pixel Shader的input，DX11里改为了SV_Position，output里，COLOR被SV_Target替代

DX9:

　

struct vs2ps
{
     float4 Pos : POSITION;
     float4 TexCd : TEXCOORD0;
};

 DX11:

struct vs2ps
{
    float4 Pos: SV_POSITION;
    float4 TexCd: TEXCOORD0;
};

DX9:

float4 PS(vs2ps In): COLOR

DX11:

float4 PS(vs2ps In): SV_Target 

 

Texture Sample的定义:

DX9:

texture Tex <string uiname="Texture";>;
sampler Samp = sampler_state //sampler for doing the texture-lookup
{
    Texture = (Tex); //apply a texture to the sampler
    MipFilter = LINEAR; //sampler states
    MinFilter = LINEAR;
    MagFilter = LINEAR;
};

DX11:

Texture2D texture;
SamplerState g_samLinear
{
    Filter = MIN_MAG_MIP_LINEAR;
    AddressU = Wrap;
    AddressV = Wrap;
};

 

如果要Sample Texture：

DX9:

float4 col = tex2D(Samp, In.TexCd.xy);

 DX11:

float4 col = texture2d.Sample( g_samLinear, In.TexCd.xy);

DX9:

float4 col = tex2Dlod(Samp, float4(In.TexCd.xy,0,level));

DX11:

float4 col = texture2d.SampleLevel( g_samLinear, In.TexCd.xy,level);

 DX9:

float4 col  = tex2Dproj(Samp,screenProj.xyzw);

 DX11:

float4 col = Samp.Sample(g_samLinear, .creenProj.xy / screenProj.w );

 

  4 GLES3.1和metal里都提供了compute shader的功能，metal shader里叫kernel function，很可惜，这部分UE4也还没支持，所以HLSLCC里也还没实现Compute Shader的转化，但相信不久以后也会支持了，拭目以待吧。

总结，自己这方面的工作也是刚开始，所以描述的深度也有限，随着额工作深入，应该会对HLSLCC和各种API如何优化做进一步分析

 

参考链接：  Bringing Unreal Engine 4 to OPENGL

分类:  Render

好文要顶  关注我  收藏该文   

Trace0429
关注 - 1
粉丝 - 112

+加关注

2

0

« 上一篇： 崛起 罗马之子的资源破解
» 下一篇： mobile cpu上禁用alpha test的相关总结

posted @  2014-10-19 23:47  Trace0429 阅读( 2025) 评论( 1)  编辑  收藏

评论列表

  

#1楼   2014-12-29 22:51  crazii   

最近也在研究跨平台shader的问题, 竟然看到吹酱的文章, 如果早点看到就好了.

支持(0) 反对(0)

刷新评论 刷新页面 返回顶部

注册用户登录后才能发表评论，请  登录 或  注册， 访问网站首页。

【推荐】50万行VC++源码: 大型组态工控、电力仿真CAD与GIS源码库
【免费】自开发零实施的H3 BPM免费下载
【推荐】Google+GitHub联手打造前端工程师课程

最新IT新闻:
·  冯大辉宣布无码科技已完成2500万元天使轮融资
·  京东十年，刘强东一人之下，内部权力的两股势力、三次更迭
·  微软推出Playable ads，无需安装就可以试用软件
·  计划取名NASA，马云说要储备未来20年的核心科技
·  Oculus推空间站VR游戏，让你在客厅体验太空漫游
»  更多新闻...

最新知识库文章:

·  垃圾回收原来是这么回事
·  「代码家」的学习过程和学习经验分享
·  写给未来的程序媛
·  高质量的工程代码为什么难写
·  循序渐进地代码重构

»  更多知识库文章...

公告

昵称： Trace0429
园龄： 4年
粉丝： 112
关注： 1

+加关注

< 2017年3月 >
日	一	二	三	四	五	六
26	27	28	1	2	3	4
5	6	7	8	9	10	11
12	13	14	15	16	17	18
19	20	21	22	23	24	25
26	27	28	29	30	31	1
2	3	4	5	6	7	8

搜索

 

 

常用链接

• 我的随笔
• 我的评论
• 我的参与
• 最新评论
• 我的标签

最新随笔

• 1. GDC2017【神秘海域 4】中所使用的顶点着色器技术
• 2. GDC2017 把“现实的天空”在游戏内再现【Forza Horizon 3】的天空表现
• 3. UE4实现风格化渲染（一）：UserNormalTranslator工具的使用
• 4. UE4开发神秘海域类游戏原型 初阶（二）：动画资源的整合
• 5. AI PRO I 第4章
• 6. 用3D再现2D偶像的可爱，Cygames【偶像大师 灰姑娘女孩】开发示例
• 7. 【偶像大师 白金星光】的【Variable Tone】技术大公开！偶像从哪里看都那么可爱，VA小组谈制作方针
• 8. 短期连载 第1回 万代南梦宫工作室动画的流派 BNS动作捕捉汐留工作室的采访
• 9. 【最终幻想15 国王之剑】制作介绍2：最大限度满足角色，背景和道具的要求
• 10. 【最终幻想15 国王之剑】制作介绍1：不再是游戏动画，而是“电影”制作

我的标签

• GDC2016(1)
• 合作翻译(1)

随笔分类

• Animation(1)
• Artificial Intelligence
• CryEngine(3)
• Mobile(3)
• Render(8)
• Ripper(2)
• Shader
• Unity3D(3)
• UnrealEngine(6)
• 技术文档翻译(50)

随笔档案

• 2017年3月 (2)
• 2017年1月 (1)
• 2016年12月 (1)
• 2016年11月 (1)
• 2016年9月 (1)
• 2016年8月 (6)
• 2016年7月 (3)
• 2016年5月 (2)
• 2016年3月 (9)
• 2016年1月 (13)
• 2015年12月 (1)
• 2015年10月 (2)
• 2015年9月 (2)
• 2015年8月 (1)
• 2015年3月 (3)
• 2015年2月 (4)
• 2015年1月 (6)
• 2014年12月 (14)
• 2014年11月 (9)
• 2014年10月 (7)

相册

• 水彩(1)

最新评论

• 1. Re:unity3d 基于物理渲染的问题解决
• "如果只用es2.0的话，因为unity会使用texCube或texCubeBias来替换texCubeLod，没有lod的支持，使用cubemap的mipmap来实现粗糙度的功能就会受到影响 最终渲......
• --mocoo
• 2. Re:UE4实现风格化渲染（一）：UserNormalTranslator工具的使用
• 有max用的吗?
• --逍遥剑客®
• 3. Re:UE4开发神秘海域类游戏原型 初阶（二）：动画资源的整合
• @Duke_PaoPao后面会在gad上出视频版和发布源码...
• --Trace0429
• 4. Re:罪恶装备 Xrd REVELATOR 3D进化出的非照片真实视觉
• 深鞠躬！ 游戏界的良心。
• --阿席达卡的雅库
• 5. Re:UE4开发神秘海域类游戏原型 初阶（二）：动画资源的整合
• 一 有吗？ 我看GAD 也没有
• --Duke_PaoPao

阅读排行榜

• 1. 【翻译】Kinect v1和Kinect v2的彻底比较(9194)
• 2. 【翻译】西川善司「实验做出的游戏图形」「GUILTY GEAR Xrd -SIGN-」中实现的「纯卡通动画的实时3D图形」的秘密，前篇（1）(7097)
• 3. 使用Xcode GPU Frame Caputre教程(5236)
• 4. UnrealEngine4 PBR Shading Model 概述(5161)
• 5. 基于物理渲染的基础理论(3960)

评论排行榜

• 1. 崛起 罗马之子的资源破解(11)
• 2. GAME AI Pro 1 第1章(7)
• 3. 【翻译】CEDEC2012 SQUARE ENIX GPGPU实现高速GI烘培工具的方法(4)
• 4. UnrealEngine4 PBR Shading Model 概述(4)
• 5. 使用Xcode GPU Frame Caputre教程(3)

推荐排行榜

• 1. UnrealEngine4 PBR Shading Model 概述(4)
• 2. unity3d 基于物理渲染的问题解决(3)
• 3. 基于物理渲染的基础理论(2)
• 4. Physically Based Render in Game 序(2)
• 5. 关于Shader的跨平台方案的考虑(2)

Copyright ©2017 Trace0429