米哈游，在业届素有“一家被游戏延误的动画公司”之称。在Unite 2018大会中，米哈游技能总监贺甲就曾分享过《崩坏3》：在Unity中实现高品质的卡通渲染。
本文将由米哈游技能总监贺甲分享米哈游最新动画短片《八重樱 · 桃源恋歌》中的制作技能。
米哈游利用Unity实时渲染的MMD次世代动画短片《八重樱 · 桃源恋歌》，今年2月在B站发布以来，得到了260多万的播放量。
《八重樱 · 桃源恋歌》这部短片，对付玩家来说绝对是一场美的享受，而对付从事Unity开拓者来看，这部短片中的模型角色，动画渲染的技能绝对顶尖。
米哈游技能总监 - 贺甲
访谈高朋：贺甲拥有中国科学技能大学硕士学位，曾担当英伟达半导体科技的研发工程师，现任米哈游技能总监和美术辅导，并专注PBR、NPR卡通渲染、过程动画及可交互物理等实时渲染领域。他致力于利用Unity做出高品质的卡通CG渲染。
技能访谈
米哈游创作《八重樱 · 桃源恋歌》短片的初衷和背景是什么？
贺甲：《八重樱 · 桃源恋歌》短片参与职员共20人，个中包含程序8人，别的为美术，但实际项目仅6名美术全职参与，别的职员则为兼职。2018年6月开始制作，2019年1月完成，历时半年。
我们紧张是希望通过结合最新的技能来探索新的渲染风格和表现的可能性，以及积累Unity引擎实时渲染制作CG动画方面的履历。
大家对付《八重樱 · 桃源恋歌》的认可，同时也验证了米哈游对付技能研发和美术结合的把控能力。
为什么选择Unity进行实时渲染创作这部短片？
贺甲：我们对Unity整套渲染流程做了全面的定制化处理：渲染管线、材质系统、殊效表现及整套后处理流程环绕终极表现完备重写，这些高度定制化的内容在Unity上是相对易于实现的。
利用Unity 2018，我们基于Unity默认的HDRP高清晰模版进行定制化开拓，并制作了专门的Shader。
利用实时渲染引制作动画短片无论从渲染开销还是效果调度迭代本钱是极低的。渲染效率自然不必多说，从迭代效率的角度而言，我们可以直不雅观的以所见即所得的形式去调度镜头，灯光，材质等效果。
我们利用了Unity Asset Store资源商店的插件AVPro Capture，只需2个小时就可以输出一个4K 60fps 5分钟规格的***进行终极效果迭代，这相对付传统流程来说都是不太可能做到的。
我们的制作团队也是一个比较年轻的团队，正是由于上述上风使得这部短片的制作成为可能。
Unity中HDRP高清晰渲染管线在这部短片中详细表示在哪些方面？
贺甲：在《八重樱 · 桃源恋歌》之前，我们曾利用Unity的默认渲染管线渲染过其余二部短片《琪亚娜·极乐净土》和《芽衣·染上你的颜色》。
在开拓过程中，我们碰着了很多在默认管线下开拓的局限性。这些局限性紧张是由于默认渲染管线的高度封装，使得我们无法自由地掌握许多效果的渲染。
首先，碰着的问题是无法精确掌握光源。
为了实现高质量的角色阴影，我们须要为角色指定某个光源，并在渲染时判断当前光源是否为角色主光源，是则利用高质量阴影贴图，否则利用内置的默认阴影贴图。
Unity的默认管线无法让我们方便地遍历全体光源列表，并且无法在Shader中得知光源与场景中实际光源的对应关系，这使得我们无法在多光源下灵巧地兼顾角色自阴影和默认阴影。
在新的HDRP高清晰渲染管线中，所有的光源列表可以在一个Pass中遍历完成，同时可以依赖光源ID剖断是否为角色主光源，从根本上办理了我们的问题。
其次，在Unity的默认管线下，我们无法灵巧掌握很多渲染。
例如：Camera depth texture、Camera depth normal texture、Camera motion vector texture等，这些Screen space textures常日是由Unity利用Replacement shader来渲染的，对用户来说险些是完备黑盒的。
为了实现风格化的卡通渲染，我们须要高度定制化这些纹理的渲染。
角色渲染须要利用额外的Pass来实现描边效果，而Replacement shader无法支持多pass渲染，这使得很多屏幕殊效在描边处会有问题，例如DOF、TAA、SSAO等。
尤其是，描边区域对TAA的质量有很大影响，为了为描边区域渲染精确的Motion vector，我们须要拿到前一帧Skinned mesh的normal、tangent等数据。如果利用了ABC格式的网格或者对偶四元数，我们乃至须要更多的数据。
我们无法在Unity的默认管线下方便地拿到这些数据。但是在HDRP高清晰渲染管线下，我们可以通过自定义的Lightmode和Shader来完备掌握这些纹理的渲染，极大地方便了我们的开拓。
此外，HDRP高清晰渲染管线让我们可以在场景中利用大量实时光源，Hybrid Deferred & Forward rendering大大增加了渲染的灵巧性。得益于Tile & cluster lighting，即便是须要利用forward rendering的物体，也可以高效地利用大量实时光进行渲染。
SSR和SSAO等一些屏幕后处理效果，在HDRP高清晰渲染管线下可以同时精确地运用于Deferred和Forward rendering上。而在Unity的默认渲染管线中，这些效果对Forward rendering都很不友好。
灵巧的渲染管线可以让我们高度定制许多风格化效果，例如风格化的Lighting、雾效、Decal system等。
总体而言，原来Unity默认的渲染管线由于高度封装性给渲染开拓造成了很多障碍，使得很多效果的高效实现变得束手束脚，乃至无法实现。
新的HDRP高清晰渲染管线利用了更加前辈和通用的渲染架构，给了开拓职员极大的自由度和开放性，这对付实现高品质的游戏或影视渲染都是至关主要的。
只管目前HDRP仍有很多底层渲染是黑盒的，很多渲染API也仍未开放，功能也尚未完备稳定，但我们相信对付有能力的开拓团队来说，HDRP高清晰渲染管线绝对是未来Unity下高品质渲染的最佳选择。
这么俊秀的布料解算是怎么实现的？
贺甲：布料部分我们利用Qcloth做解算，通过Alembic格式导入Unity。
Abc动画文件的大小和模型面数有很大关系，我们把布料主体掌握在2W面旁边，基本可以保留褶皱仿照所须要的网格精度。要担保表面的平滑则需后续在渲染的时候做曲面细分，这样4分钟30fps的动画数据大概只有1G大小，是一个相对适中的大小尺寸。
导入Unity引擎后，我们利用自定义实现的基于GPU的Catmull-Clark Subdivsion以渲染出绝对平滑的布料表面，整套流程从表现方面非常令人满意。
由于是离线烘培的数据，对付效果迭代会有一定的数据交流本钱。为了进一步提升迭代效率，我们还初步完成了Position Based的GPU Cloth仿照。
在仿照4万个粒子的情形下已经可以实时跑60fps且表现出自然的褶皱。这将极大减少效果迭代所须要的韶光，基于GPU实时仿照的方案将在之后的制作流程中开始运用。
能否先容一下头发的实现细节？
贺甲：根本的Diffuse shading利用了Multi-layer toon ramp实现丰富的阴影及色彩的渐变和细节。高光打算则利用了各向异性材质，并利用两层高低频高光叠加来得到更丰富的层次和变革。
为了表示更为风格化的高光形状，我们还利用参数化曲线结合Jitter noise来定义头发高光的形状，这些参数都可以实时调度，方便终极调出满意的效果。
卡通造型的头发如果要实时打算光照对模型制作方面的哀求也比较高，要按照严格的硬表面来制作哀求才能担保高光的顺滑。
眼睛看上去那么有神是如何实现的？利用了分外的Shader吗？
贺甲：眼睛是卡通渲染核心的表现点，我们一方面希望眼睛可以从不同角度表示质感，另一方面又要担保卡通插画的觉得，因此专门为眼睛定制了分外的Shader，紧张仿照了眼球折射和光束焦散效果，再合营手绘的纹理材质，终极达到了期望的效果。
如何看待实时渲染技能对付未来动画影视行业的意义？
贺甲：毫无疑问实时渲染技能对付未来影视动画是一个趋势，已经逐步开始有厂商利用实时引擎去做动画。对付整体行业制作方面转型以及大规模利用还有很长的路要走，但是它的上风已经逐步开始显露。
一方面可以从渲染效率和迭代本钱上极大加速现有制作流程，另一方面也使得小型团队乃至个人做出高品质的影视及动画作品成为可能。
新兴技能的涌现，例如：基于机器学习的Procedural animation，GPU实时Raytracing等也都将加速这一进程。实时渲染技能对动画影视行业的影响将经历一个从量变到质变的过程。
米哈游还会有操持基于Unity创作实时渲染的动画项目吗？贺甲：我们还在进一步完善提高整套流程以及渲染品质来推动引擎在动画制作方面的运用，敬请期待后续作品。
