虚幻4渲染编程(光线追踪篇)【第四卷:Realtime Raytracing In UE4】

2023-11-23 06:40

本文主要是介绍虚幻4渲染编程(光线追踪篇)【第四卷:Realtime Raytracing In UE4】,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

MY BLOG DIRECTORY:

YivanLee:专题概述及目录

INTRODUCTION:

【1】 realtime raytracing overview

我们渲染一个东西需要一个渲染管线,渲染管线就是一系列操作把输入的数据渲染成最终的图片。最开始我们使用固定管线,然后再发展到可编程管线,其实还是相对固定的,我们只能控制整个渲染管线的一部分比如VS,PS,GS等,大部分流水线的逻辑都是焊死在硬件里的。来看下传统可编程管线:

v2-9f0a12f4c1946ba88e0131b5512dc5d8_b.jpg

把这些逻辑做在硬件里的一个考虑其实是为了加速,同理如果要做实时光线追踪,我们就需要有足够的速度,所以2018年的时候英伟达那帮人推出了比较民用的RTX显卡,把光线追踪的逻辑焊死到显卡里,我们开发者能做的就只能是使用他们暴露出来的接口来编写我们的东西。优点就是速度快,缺点也很明显,自由度低,如果想要改什么功能需要硬件支持,需要微软的DX支持。这次在API层面对DX12的改进,主要是加入了一个全新的管线专门执行光线追踪的任务。以后让GPU发起任务的方式除了现有的光栅化渲染,和通用计算(CS)以外,还新加入了一个追踪光线的调用。新的光线追踪管线如下:

v2-f85718d2993cdfb323b91b316a5db44e_b.jpg
v2-4bdefdc77552914843cd1f865120bf5f_b.jpg

把上面红框框起来的的步骤展开,场景和光线的交互这步可以被分为以下阶段:

v2-f0a6e2443dbb003e777dc5ec016dfbb7_b.jpg

上述的所有过程都是固定的,我们可以控制的部分为蓝色线框框起来的部分。

整条管线的具体组成单元:

发起光线:

新D3D函数: ID3D12CommandList::DispatchRays()

新Shader类型:Ray Generation Shader

新HLSL函数:TraceRay()

Ray Generation Shader:定义一条光线如何产生,开始整个光线追踪过程。一个pass只执行一次。

光线的遍历与求交

遍历加速结构(Acceleration Structures)

新Shader类型: Intersection Shader。Intersection Shader定义光线如何和物体交互。

交点处理

Hit Group : 由Closest Hit, Any Hit, Intersection三种Shader构成。都不是必须的Shader,可选择调用

Intersection Shader:用于自定义几何体与射线求交,三角形与射线求交无需使用(内置)通过调用ReportHit()报告交点,同时传递Attributes给Hit Shaders

Any Hit Shader:射线有任一交点时被触发(不保证触发顺序)

v2-c5572e6b4ebc1dda60c0a2c097cf6dc8_b.jpg

Closest Hit Shader:针对最近的有效交点触发,每条射线最多调用一次

v2-ec64c72d6d189c8c262271cb880950ce_b.jpg

判断交点的有效性,计算光照,继续发射光线等

无交点处理

Missing Shader:定义光线没有追踪到物体时的逻辑。终止或继续发射光线


DXR综述:

v2-2574fefcce048d9f122b15a8b129df07_b.jpg
v2-7a67294ed9551a2803c7bb8efa457969_b.jpg
v2-5d70d9b69537e10548545874e14b035a_b.jpg

逻辑层由ID3D12CommandList::DispatchRays()发起

v2-10caf7d916b35383b6b7005bca353eba_b.jpg

HLSL函数TraceRay()

由Ray Generation Shader产生我们需要的光线,是追踪管线的开始,一个pass只会执行一次。类似程序的main函数。调用TraceRay发起下一个阶段。

v2-f16391f2553a5f2a4117030da569c3c7_b.jpg


Shader table

v2-4bfbde02a7cf439b0d39561ff7f5635c_b.jpg

着色器表 (Shader Table)包含了一次光线追踪中可能用到的所有资源,由多条等长的记录构成,每条记录可包含ShaderID,CBV,UAV,SRV等。顶层加速结构中的节点指向着色器表中的对应记录。

在一个游戏场景里,往往都有很多材质,所以这时候就需要很多不同的Shader来渲染他们。所以需要一个方法来让光线打到物体上以后,我们能正确的找到这个物体身上对应的shader来渲染它们。ShaderTable会记录下场景中物体的shader,当光线打到集合体上时,会通过shadertable来查找对应的shader。


【2】Hello realtime raytracing in unreal engine4

经过上几节的研究,下面就可以开始研究实时光线追踪了。为什么可以实时呢,因为运算速度够快所以可以实时。因此需要准备一块支持RTX的显卡。因为是在Unreal中研究所以还需要4.22以上的版本,并且按照文档打开Tracing设置。

docs.unrealengine.com/e

完成设置后你就能看到:

v2-4dc72f7c2c6a1fda70af7a1e07f10224_b.jpg

Unreal帮我们封装了一套RHI接口方便跨平台等功能,但其实还是要管理各种资源,比起直接敲DX12要更方便一点点(其实也没方便多少)。


MAIN CONTENT:

在UE中写实时光线追踪还是和以前的可编程管线类似分为两部分的编程,一部分是C++,一部分是HLSL。

GPU部分

这里可以找到一个比较好的简单范例,我们找到RayTracingDebug.usf,先来找到Ray Generation Shader,这个shader作为一次光线追踪的起始函数,它和DX里的写法没有什么不同,最多就是Unreal帮忙封装了一点点逻辑。和标准写法一样,首先用[shader("raygeneration")]声明它是Ray Generation Shader,然后准备加速结构和光线位置生成光线,然后调用TraceRayInternal开始光线追踪。

v2-2da70a93db5fcd6272ad98031d426415_b.jpg

当光线Hit到物体后开始执行Closest Hit Shader。Hitshader也和DX里的写法几乎没有什么区别

v2-37ba4ad816e75c59141d5a0664326622_b.jpg

将hit结果写入到PlayLoad里。这里会发现有一个PackRayTracingPayload,我们找到RayTracingCommon你会发现

v2-c0f4160a6f12f509a2592a88a62bf76c_b.jpg

这里在把PlayLoad数据打包压缩,这么做的目的是因为PlayLoad数据的大小是有规定的必须是float32。

MissShader在DebugRaytracing里就简单了,直接输出-1

v2-81544f7608603a444837bd8a4367075a_b.png

下面可以做一个简单的测试,在PlayLoad的HitT判断后加入如下逻辑

v2-ece4768b56c85eb1c3df9a68fd87fa2c_b.jpg

如果执行了missshader,那么就返回绿色。打开debug面板我们就能看到RaytracingDebug.usf的修改效果了。

v2-f65a440ccf8a2543f6829593a5c8da49_b.jpg

修改前:

v2-5a7bf107c6fc1dc9d0e2404d10b69b14_b.jpg

修改后:

v2-71e01c4d6f9a32270b27da5d8727bda5_b.jpg


CUP部分

找到RaytracingDebug.cpp可以发现实时光线追踪的shader声明方法和像素着色器顶点着色器的声明非常类似,unreal帮我们封装好了一些麻烦的desc声明等等。

Ray Generation Shader

v2-c65c91b328c4790d52b7e163b7d4d11c_b.jpg

Missing Shader

v2-1e5676fdabc61d3110c15613dd530409_b.jpg

HitGroup

v2-ff49c18754cfef82b6b032dea809f340_b.jpg

Unreal把那几个hitshader打包在一起用SF_RayHitGroup来声明。可以看到还是十分简单方便的(我再也不想去碰DX那堆恶心的desc声明了)。这里需要注意的是,虽然在RaytracingDebug里声明了missshader和ClosesrHitshader,但是RaytracingDebug真正并没有使用它们。

v2-924f826c523bed7840ac22bcb1ea8dbe_b.jpg

在管线里根本就没有绑定它们

v2-8082fd2d99b641d84c9f8a655eb6937c_b.jpg

因此在RaytracingDebug里执行的hitshader其实是RaytracingMaterialHitShaders.usf里的

这部分shader的绑定发生在BuildRaytracingMeshCommand里

v2-9cdac9bf88c42054546a6d36cea3cbb1_b.jpg
v2-a33369adf12559d4b57dc098774a9440_b.jpg
v2-2f4eb2205c60508fd7bad8c1b191c945_b.jpg

想要使用自己的ClosestHitShader或者AnyhitShader的话就需要在构建ShaderTable的地方做修改才行。

我在RaytracingMaterialHitGroup中做如下修改,把HitShader改为我们的

v2-1f2f5c3c8e142840f0e6853a33437937_b.jpg

这样就可以替换Hitgroup成我们自己定义的了。


现在了解了实时光线追踪的结构,下面我们就可以开始动手做一些练习了。下面就在实时光线追踪里做个简易的shading,这里我只做了直接光的BRDF计算。

v2-a2c17db85207524499955f9870ffa5c8_b.jpg

首先在RayTracingDebug.usf中包含ShadingModels.usf

v2-1b471c756d1f5c88456e5cf09b9f845d_b.jpg

然后在RayTracingDebugMainRGS中,在光线发射之后,我们从playload中拿各种渲染数据然后evaluateBxDF

v2-d3107feffd72d4e02a9fd15ecc05c8dc_b.jpg

然后来到引擎,打开raytracingdebug即可。

v2-341ff2c3fb8107409a7f42a15fe04d93_b.jpg

可以看到实时光线追踪的整个流程比光栅化渲染简单多了(当然是因为英伟达帮我们把什么事情都做了的结果)。至此我们完成了初步的光线追踪定制。


SUMMARY AND OUTLOOK:

感觉在Unreal中写实时光线追踪和在DX里写没太大差别,反而在Unreal里写会更好一些,引擎帮我们封装了一些体力活的东西,我们只需要专注核心的就可以了。英伟达的RTX让图形难民也能玩实时光线追踪,门槛已经下降到几乎没有了(手动滑稽)。Enjoy it。


NEXT:

YivanLee:虚幻4渲染编程(光线追踪篇)【第五卷:RayMarching In Raytracing】

这篇关于虚幻4渲染编程(光线追踪篇)【第四卷:Realtime Raytracing In UE4】的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/416085

相关文章

Linux 网络编程 --- 应用层

一、自定义协议和序列化反序列化 代码: 序列化反序列化实现网络版本计算器 二、HTTP协议 1、谈两个简单的预备知识 https://www.baidu.com/ --- 域名 --- 域名解析 --- IP地址 http的端口号为80端口,https的端口号为443 url为统一资源定位符。CSDNhttps://mp.csdn.net/mp_blog/creation/editor

【Python编程】Linux创建虚拟环境并配置与notebook相连接

1.创建 使用 venv 创建虚拟环境。例如,在当前目录下创建一个名为 myenv 的虚拟环境: python3 -m venv myenv 2.激活 激活虚拟环境使其成为当前终端会话的活动环境。运行: source myenv/bin/activate 3.与notebook连接 在虚拟环境中,使用 pip 安装 Jupyter 和 ipykernel: pip instal

【编程底层思考】垃圾收集机制,GC算法,垃圾收集器类型概述

Java的垃圾收集(Garbage Collection,GC)机制是Java语言的一大特色,它负责自动管理内存的回收,释放不再使用的对象所占用的内存。以下是对Java垃圾收集机制的详细介绍: 一、垃圾收集机制概述: 对象存活判断:垃圾收集器定期检查堆内存中的对象,判断哪些对象是“垃圾”,即不再被任何引用链直接或间接引用的对象。内存回收:将判断为垃圾的对象占用的内存进行回收,以便重新使用。

Go Playground 在线编程环境

For all examples in this and the next chapter, we will use Go Playground. Go Playground represents a web service that can run programs written in Go. It can be opened in a web browser using the follow

深入理解RxJava:响应式编程的现代方式

在当今的软件开发世界中,异步编程和事件驱动的架构变得越来越重要。RxJava,作为响应式编程(Reactive Programming)的一个流行库,为Java和Android开发者提供了一种强大的方式来处理异步任务和事件流。本文将深入探讨RxJava的核心概念、优势以及如何在实际项目中应用它。 文章目录 💯 什么是RxJava?💯 响应式编程的优势💯 RxJava的核心概念

函数式编程思想

我们经常会用到各种各样的编程思想,例如面向过程、面向对象。不过笔者在该博客简单介绍一下函数式编程思想. 如果对函数式编程思想进行概括,就是f(x) = na(x) , y=uf(x)…至于其他的编程思想,可能是y=a(x)+b(x)+c(x)…,也有可能是y=f(x)=f(x)/a + f(x)/b+f(x)/c… 面向过程的指令式编程 面向过程,简单理解就是y=a(x)+b(x)+c(x)

Java并发编程之——BlockingQueue(队列)

一、什么是BlockingQueue BlockingQueue即阻塞队列,从阻塞这个词可以看出,在某些情况下对阻塞队列的访问可能会造成阻塞。被阻塞的情况主要有如下两种: 1. 当队列满了的时候进行入队列操作2. 当队列空了的时候进行出队列操作123 因此,当一个线程试图对一个已经满了的队列进行入队列操作时,它将会被阻塞,除非有另一个线程做了出队列操作;同样,当一个线程试图对一个空

生信代码入门:从零开始掌握生物信息学编程技能

少走弯路,高效分析;了解生信云,访问 【生信圆桌x生信专用云服务器】 : www.tebteb.cc 介绍 生物信息学是一个高度跨学科的领域,结合了生物学、计算机科学和统计学。随着高通量测序技术的发展,海量的生物数据需要通过编程来进行处理和分析。因此,掌握生信编程技能,成为每一个生物信息学研究者的必备能力。 生信代码入门,旨在帮助初学者从零开始学习生物信息学中的编程基础。通过学习常用

rtmp流媒体编程相关整理2013(crtmpserver,rtmpdump,x264,faac)

转自:http://blog.163.com/zhujiatc@126/blog/static/1834638201392335213119/ 相关资料在线版(不定时更新,其实也不会很多,也许一两个月也不会改) http://www.zhujiatc.esy.es/crtmpserver/index.htm 去年在这进行rtmp相关整理,其实内容早有了,只是整理一下看着方

使用Qt编程QtNetwork无法使用

使用 VS 构建 Qt 项目时 QtNetwork 无法使用的问题 - 摘叶飞镖 - 博客园 (cnblogs.com) 另外,强烈建议在使用QNetworkAccessManager之前看看这篇文章: Qt 之 QNetworkAccessManager踏坑记录-CSDN博客 C++ Qt开发:QNetworkAccessManager网络接口组件 阅读目录 1.1 通用API函数