随 风 而 去 的 往 事
phoenixzz · 2006-03-27
<< 怎样才能速成为游戏开发设计师(ZT)
|
首 页
|
界面库Prof-UIS使用心得(1) >>
Bump Mapping概述(翻译)
2005-07-30
Tag:
技术专题
版权声明
:转载时请以超链接形式标明文章原始出处和作者信息及
本声明
http://phoenixzz.blogbus.com/logs/1332892.html
Bump Mapping
概述
1.
概述
无论是程序员还是美工人员,几乎每个游戏开发者都知道一些
3D
图形学的知识,因此每个人都或多或少了解一点
bump mapping
。
Bump mapping
是在像素级别扰动物体表面法向量的一种光照技术,它一般采用纹理映射作为输入表示扰动的大小。在光照计算时考虑到扰动的法向量,不需要增加额外的几何信息就可以增强被渲染物体的表面细节。
Bump mapping
在许多离线渲染系统中已经存在很久了,并且现在也已成为实时渲染引擎的标准。可是,在实时渲染引擎中实现
Bump mapping
的技术也有很多种,从非常简单的到非常复杂的,不是所有的图形程序员都很熟悉它们。本文的目标就是向
Bump mapping
初学者介绍最重要的实时技术,解释围绕着这些技术的难题。
2.
最初的方法
Bump mapping
最初由
Jim Blinn
在
1978
年发明,他发表了一篇名为
“
Simulation of Wrinkled Surfaces
”
的论文。
Blinn
使用了一种灰度高度图(
grayscale height map
)来建模物体表面法向的扰动,扰动法向量的大小用某些表面参数(典型的为纹理坐标)的偏微分和高度图来计算。这些微分表示了某些潜在值的变化率,因此,如果高度的微分值很大,则表示高度图中该点坡度很陡。
正如上面所说的,这些扰动的法向量需要加入光照模型中进行计算,这就暗示说所采用的光照模型必须是像素级的(
"Phong shading"
),而不能是顶点级的(
"Gouraud shading"
)。这里必须指出
"Phong shading"
和
"Phong's lighting model"
是不同的概念,尽管鲜见有人作出区分。
Phong shading
意思是插值顶点法向量在片元(
fragment
)级别计算光照公式,而
Gouraud shading
意思是逐顶点计算光照公式,最后再插值颜色。
Phong
光照模型(
Phong's lighting model
)只是一种特定的计算光照的公式,可以在顶点级别也可以在片元级别进行计算。例如
OpenGL
的标准光照是基于
Phong
光照模型但使用
Gouraud shading
。因此,
bump mapping
可以看作为
Phong shading
的扩展(使用
bump map
来扰动法向量),但并不是说你必须用
Phong
光照模型。
3.
实时技术
下面的几段将讨论
bump mapping
实现的不同方法,我们从最简单的开始逐渐过渡到最复杂的技术。
3.1
Emboss bump mapping
Emboss bump mapping
也是采用一张
height map
,就像
Blinn
的最初方法,但它不是计算逐像素扰动的法向量,而是直接计算光照密度。因此,与
Blinn
的
bump mapping
技术不同,不能随意选择光照模型。
实现
emboss bump mapping
的第一步是对
height map
进行预处理产生两个分离的映射图。第一张图具有原始
height map
一半的明亮度,第二张具有原始
height map
反转图一半的明亮度。绘制需要分三步完成(当然可以用多纹理方法一步完成),第一遍绘制使用半明亮度图;第二遍采用反转半明亮贴图,但纹理坐标需要朝着光源方向做微小的偏移,同时采用
“Additive blending”
纹理混合模式;最后一遍使用逐顶点的光照模型并将结果与原来的纹理相乘。下图显示了前两步的处理过程。
因为没有计算扰动的法向量,
emboss bump mapping
只能用于
diffuse lighting
中,因此这种技术缺乏实用性,但由于几乎不需要任何的特殊硬件支持,它可以用标准
OpenGL1.1
实现,甚至可以不使用多纹理技术。
3.2
Environment-mapped bump mapping (EMBM)
环境影射
bump mapping
最初由
Bitboys
开发,但实际将这种技术带入市场的显卡是
Matrox G400
。
EMBM
扰动纹理坐标而不是法向量,其输入纹理是一个二维的
DU/DV
图像:其中的纹理像素表示应用到
U/V
纹理坐标上的偏移量。换句话说,存取特定图元的纹理坐标是
(U + DU, V + DV)
,其中
U
和
V
分别表示逐顶点插值的纹理坐标,
DU
和
DV
则是从
bump map
中获得。
从扰动的纹理坐标来实现
bump mapping
效果,你的光照必须来自纹理。典型的是,纹理可以是一个环境映射(因此命名为
EMBM
),用来存取这些纹理的纹理坐标可以用表面法向量的函数计算获得。环境映射可以是基于视线的也可以不是,并且可以用于仿真散射与镜面光照。因此,逐像素扰动环境映射纹理坐标可以仿真扰动法向量的
bump mapping
效果而不必真正地计算法向量。
典型的,这种
DU/DV bump map
产生自一个灰度高度图(
grayscale height map
),通过查询高度值的微分,可以得到:物体表面越陡,
DU/DV
就越大。注意偏移是有符号的值,因此需要缩放到
0
~
255
这个范围,当运用这个映射进行渲染时,你需要将这个值再映射到
-1
~
1
这个范围。
很明显,
EMBM
也可以应用于环境反射(环境映射的典型用法),这意味着你可以用它来仿真凹凸反射物体。这向着实现真实的
bump mapping
效果前进了一大步,但是你仍然没有存取扰动的表面法向量,因此从环境图中提取的信息量限制了可以选择的光照模型。
3.3
Normal mapping
Normal mapping
是当前最通用的实时
bump mapping
技术,该技术最初来源于
Peercy
等人的论文
"
Efficient Bump Mapping Hardware
"
。输入纹理是一个
normal map
,在其不同的颜色通道中记录了扰动的表面法向量。像
DU/DV maps
一样,
normal maps
典型地产生于一个高度场,高度值的偏微分可以用于计算扰动表面的坡度,因此也可以用于计算扰动的法向量。法向量的
XYZ
分量可以被编码进纹理的
RGB
通道来产生最终的
normal map
。
上图显示了一个
height map
以及由它产生的
normal map
。这个
normal map
的
XYZ
分量已经从
-1~1
的范围放大到
0~255
范围,向量
[0, 0, 1]
将被转化为
RGB
颜色
[127, 127, 255]
,因此,这个紫
/
蓝色是
normal map
的主色调。
这里有一个非常重要的问题:这些法向量处于哪个坐标系统?它们是相对于最初
height map
的“地平面(
ground plane
)”进行计算的,当对一个模型应用这个
normal map
时,必须假设
[0, 0, 1]
法向量对应于最初未扰动的表面法向量。
Blinn
使用
height maps
时也会遇到同样的问题,他使用表面纹理坐标的偏微分来构造法向量的坐标系统。这种坐标系统叫做“切空间(
tangent space
)”——其
X
和
Y
坐标轴与
UV
纹理坐标平行,
Z
轴垂直于纹理表面,
X
和
Y
轴通常叫做
"tangent"
和
"binormal"
向量,
Z
轴对应于未扰动的表面法向量。
Blinn
对每个像素计算其切空间用于在模型坐标系统中产生扰动的法向量,
Peercy
在论文“
Efficient Bump Mapping Hardware
”中引入了一种更加高效的方法,只在顶点级预先计算
tangent
与
binormal
向量,在实际绘制时,每个顶点处的表面点
->
光源向量(
surface-to-light vector
)转化到切空间并且进行插值。在像素级别,单位化光源向量,因此现在你有了在同一坐标系统中的光源向量与扰动法向量,随后就可以在切空间中进行光照计算。
一旦具有了像素级别的表面法向量,就可以使用你所喜欢的任意光照模型,早期的显卡比如
GeForce
和
Radeon
只可以使用扰动的法向量执行简单的点乘操作(通常是三个分量的点乘操作,因此常被称为“
Dot3 bump mapping
”)。高质量的镜面光照计算很难,因为在这些显卡上不能进行取幂操作,比较新的显卡提供了更加灵活的片元处理功能,允许你用
normal map
实现更加先进的逐像素光照计算,并且利用表面法线可以实现各种反射折射以及更复杂的光线运算。
3.4
最初的
height map
方法
最新的显卡支持片元级别的偏微分运算,可以并行地运算四个或更多的
fragments blocks
(运用多片元管线),因此可以方便地计算相邻像素之间值的变化率。你可以实时地应用这个功能动态转化
height map
为
normal map
,这可以解决离线计算
normal maps
的麻烦,更方便美工人员制作
bump map
。
实时转化尽管增加了运算负载,但你可以在
pixel shader
中用
height map
进行其他目的的计算,不过至少在目前离线计算
normal maps
仍是明智的选择。
4.
Bump Mapping
没有的,并且也不是
Bump Mapping
的技术
4.1
Displacement mapping
Displacement mapping
相对于
bump mapping
来说也使用
height map
来表示表面的扰动,不同的是
displacement mapping
实际修改表面的几何信息,而
bump mapping
只影响表面法向量。换句话说,
displacement mapping
增加了模型的几何细节,硬件加速的
displacement mapping
技术目前还很不成熟。
你可以在
vertex shader
中使用
displacement mapping
偏移顶点使之沿着法线方向偏移,即使你的显卡足够劲可以同时处理大量的顶点,你仍然需要调整真实顶点的位置。在没有某种自适应
tessellation
策略的情况下,取得较好可视结果需要处理的面片数目大的惊人,除非
displacement map
本身也可以实时产生。除此以外,
displacement
技术一般是不能实时应用的。
4.2
光照模型
经常有人抱怨说“
bump mapping
使真实的物体看上去像塑料”,尽管有证据支持这种说法(某些游戏应用了
bump mapping
技术),但不是
bump mapping
技术使物体看上去像塑料,是光照模型的原因。许多游戏使用了
Blinn/Phong
光照模型,如果加上镜面光照,看上去确实像塑料,可是如果应用同样的模型而不使用
bump mapping
,场景仍然看上去像塑料,这有可能更多的是美工的问题。
5.
更加先进的方法
5.1
细节保留
当讨论
normal mapping
的时候,我们注意到
normal maps
一般从一个
height map
生成,然而,采用将表面法向量渲染到纹理的方法,从模型也可以产生
normal maps
。“细节保留”技术采用了这种方法来实现模型简化,一个高模和一个低模作为输入,将高模的细节保存到一个纹理中,并将这个纹理贴到低模上。这种“细节”可以是任意的表面属性,包括颜色和法向量,如果你采用细节保留技术产生一个
normal map
,你就可以使用高
LOD
版本(
high-LOD version
)的光照信息渲染低
LOD
版本(
low-LOD
)的模型。
映射高模模型到低模模型,低模必须要有唯一的
UV
映射,例如纹理映射时不能有存取两次的图元。对于
normal map
中的每个图元,你可以计算该图元位置处低模上点的坐标,得到这点的表面法线并且沿着这个法向向量发射一条射线,根据这条射线与高模的相交点可以知道高模的表面法向量并将之存为一个
normal map
。注意这条射线是双向的,因为高模的表面可能在低模表面之前也有可能在其后。
这种技术也可以被称为
"polybump"
或
"renderbump"
,前者来自于
Crytek
,一种细节保留工具“
PolyBump
”的开发者;后者,众所周知来自于
Doom 3
。
5.2
自阴影
bump map
Bump mapping
靠扰动表面法向量来影响光照,但扰动的法向量不会影响任何形式的阴影。因此,一个凸块(
bump
)将不会在另一个凸块上产生阴影。可是现在已经有方法允许
bump maps
产生自阴影,其中的一种技术叫做“
horizon mapping
”。一个
horizon map
是一种从特定点向各方向记录可见水平高度(
the elevation of the visible horizon
)的纹理。如果另外的一个点判断低于这个水平高度,可以认为该点相对于特定点不可见,与之相似的是,光源如果低于这个水平高度,就不会照亮对应的特定点。
你可以在切空间对光源向量执行这种可见性检查,就可以产生自阴影
bump maps
,其主要的缺点是
horizon maps
占用过多纹理内存,而且计算量很大。上图展示了
horizon mapping
绘制的情况,这个复杂场景只绘制了一个四边形,绿线表示光源的照射方向。
5.3
Parallax mapping
尽管
bump mapping
可以极大地增强场景渲染的真实感,但其仍然只是一种基于纹理的技术,这意味着绘制表面始终仍为“平(
flat
)”的。
Displacement mapping
技术靠修改实际几何表面来解决这个问题,但是如前所述,在实时绘制系统中目前并不是最实用的技术。视差映射(
Parallax mapping
)是一种先进的
bump mapping
技术,在一定程度上可以弥补以上缺陷而不需要
displacement mapping
那么复杂的运算。摄像机在物体表面平移时,视差映射可以给你一种合适的视差效果,不必修改实际的几何信息。因此,当你低于一定的角度观察一个平面时,虽然可能仍感到它是平的但物体的轮廓不会收到影响。
视差映射,也被称为
"offset mapping"
或
"virtual displacement mapping"
,也需要一个
height map
作为输入,这种视差效果可以通过将每个图元处的纹理坐标向眼睛方向偏移一定距离来实现,偏移的长度可以根据该位置处
height map
的值估算。
对于已存在的
bump mapping shader
来说,
Parallax mapping
只增加了较少的指令,但结果却好的多。你的
shader
程序需要一个
height map
,这通常不是问题,它可以保存在
normal map
的
alpha
通道中,也可以分开保存,甚至你只需要一个
height map
,用它来实时计算法向量。
5.4
Z-correct bump mapping
如果你想进一步提高渲染效果以实现
displacement mapping
那样的效果,你就需要使用
Pixel Shader
来修改渲染图元的
Z
值,除了使用一个
height map
作为输入外,必须向着视线方向偏移
Z
值。这种技术仍然不会改变场景的实际几何信息,但当两个物体接触或相交时,相交处会随着表面的凹凸情况发生变化而不仅仅表示为一条直线。
Z-correct bump mapping
有一个很大的缺陷,在
pixel shader
中修改
Z
值会禁止图形硬件的早期深度测试优化。早期深度测试优化可以在
pixel shader
执行前去除深度测试失败的图元,这可以极大地增进性能,如果
shader
修改了深度值,早期深度测试优化将不会执行。
逐像素的光照计算在处理独立光源之前,通常要计算环境光部分(
Z+ambient pass
),这部分计算正需要用到早期深度测试优化。因此,禁止深度测试优化可能极大地影响绘制效率,其不利影响甚至超过几条
pixel shader
指令带来的优化效果。
6.
结论
Bump mapping
背后的基本技术就是扰动用于光照计算的表面法向量。
Blinn
的原始方法需要计算
height map
的坡度来产生扰动的法向量,这种方法近年来才被用于实时系统。我们还讨论了一些更加实用的
bump mapping
方法,首先的两种技术是
emboss bump mapping
和
EMBM
,它们都不是真正计算扰动的法向量,因此这使它们并不灵活,可能不值得大量应用。
我们讨论的第三种技术是
normal mapping
,它是当前使用的标准方法,
normal mapping
真正地扰动表面法向量,这意味着理论上其可以应用于任何光照模型。实际上,采用的光照模型受限于显卡的硬件性能与片元处理能力,早期的显卡实现
normal mapping
相当受限制,仅仅计算散射光照部分,你不得不对每个光源都采取多遍渲染,而更新的显卡可以实现更加专业的光照模型。
之后,我们讨论了一些
bump mapping
的先进应用。细节保留技术允许你用高
LOD
模型细节来渲染一个低
LOD
模型。自阴影的
bump maps
可以在表面的凹凸块上产生自阴影来增加场景的深度信息。视差映射仿真视差效果增加了更多的深度信息,如果跟随摄像机在物体表面平移,你可以看到更加真实的几何细节。
Z-correct bump mapping
扰动两个相交物体相交处的轮廓来更进一步增加真实感。
A.
参考文献
Further reading:
Simulation Of Wrinkled Surfaces, Jim Blinn (not freely available online to my knowledge)
Efficient Bump Mapping Hardware
, Mark Peercy, John Airey and Brian Cabral
Bump Mapping
, Anders Hast
Interactive Horizon Mapping
, Peter-Pike Sloan and Michael F. Cohen
Parallax Mapping with Offset Limiting: A Per-Pixel Approximation of Uneven Surfaces
, Terry Welsh
Preserving Attribute Values On Simplified Meshes By Resampling Detail Textures
, P. Cignoni, C. Montani, C. Rocchini, R. Scopigno and M. Tarini
All The Polygons You Can Eat: Without The Fat
, Doug Rogers (includes some good information on detail preservation)
Tangent Space Calculation
, Eric Lengyel (example code for calculating tangent frames)
Useful tools:
ATI developer tools
, including a normal map generator and a detail preservation tool
NVidia texture tools
, including a normal map generator
NVidia Melody
, a mesh simplification and detail preservation tool
Open RenderBump
, a detail preservation tool
Bump mapping demos on Delphi3D:
Emboss bump mapping
.
EMBM
for fake refraction (NVidia only).
The "
Hello world
" of
normal mapping
.
Per-pixel lighting
using normal maps. Different code paths for different hardware generations (NVidia only).
Portal renderer
with shadow mapping and per-pixel lighting using normal maps.
Horizon mapping
.
A
combination
of horizon mapping, parallax mapping and z-correct bump mapping.
A simple
mesh-based normal map generator
for generating tiled normal maps.
随机文章:
超级强大的免费通用音频/视频批量转码工具MediaCoder
2008-03-07
window下MPUI与SMPlayer字幕乱码问题之补遗
2008-03-05
什么是Web2.0?-图解Web2.0(ZT)
2008-02-27
谷歌推出2008元宵节短信热榜
2008-02-20
非常恐怖的Spokeo
2008-02-18
收藏到:
Del.icio.us
引用地址:
发表于
17:15
|
编辑
|
继续话题
|
转发
|
推荐
评论
一个好的入手点,你可以去下面这个网站看看,几乎包括了所有的图形学相关信息。
http://www.realtimerendering.com/
phoenixzz |
[
回复
]
请问还有没有更多的介绍?您是搞这方面的专家吧,我近期想研究这一方面,请多多指教哪里有更多的信息??
zj |
[
回复
]
发表评论
原始快照:web.archive.org