遅延シェーディング

遅延シェーディング (ちえんシェーディング、英: Deferred Shading、ディファードシェーディング、遅延レンダリングとも) は2次元のスクリーンスペース（画面空間）上でシェーディング（陰影計算）を行なう技術である。遅延と呼ばれるのは最初にジオメトリを処理する頂点シェーダーからピクセルシェーダーに至るまでの第1パスでシェーディングが実際に実行されていないからである。かわりにシェーディングは第1パスの結果を使ってレンダリングされる第2パスまで「遅延」される。

遅延シェーダーの第1パスでは、最終的なシェーディングに必要とされるデータがいったん収集されるのみとなる。各表面の位置や法線、マテリアルといった幾何学情報は、1組のテクスチャとしてジオメトリバッファ (英: Geometry Buffer, G-Buffer) にレンダリングされ、2次元情報として保存される。この後、ピクセルシェーダーは、スクリーンスペースにおいてテクスチャバッファの情報を使うピクセルごとに直接あるいは間接照明を演算する。

スクリーンスペース・ディレクショナルオクルージョン^[1]は直接影や反射を与えるという目的で遅延シェーディングのパイプラインの一部にすることができる。

メリット

遅延シェーディングの主なメリットとしては、シーンのジオメトリとライティングの分離が挙げられる。遅延シェーディングの対義語として、従来のレンダリング手順は前方シェーディング (英: Forward Shading、フォワードシェーディング、前方レンダリングとも) と呼ばれることがあるが、前方シェーディングでは光源の数に応じてジオメトリパスを走らせる必要があり、光源の数に比例してパフォーマンスが低下していく。一方、遅延シェーディングにおいては、光源の数がいくら増えようとも、1つのジオメトリパスのみが要求され、各光源は実際に影響するピクセルに対してのみ計算される。これは深刻なパフォーマンスへの影響なしに、シーンに多くの光源を配置できるということである^[2]。この手法ではほかにもいくつかのメリットが論じられている。メリットには、複雑なライティングにおけるリソース管理の容易化・柔軟化（光源の形状、光の波長すなわち色、および光源の数などの特性の制御）、およびCPU・GPU双方におけるソフトウェアレンダリングパイプラインの単純化も含まれうる。

デメリット

遅延レンダリングの重要なデメリットとして、アルゴリズムで透明度 (英: transparency) を制御できないことが挙げられる。この問題はZバッファを使ったシーンでは一般的な問題ではあるが、シーンの透明部分のレンダリングを最後まで遅らせ、さらに深度ソートすることによって制御・解決されることが多いため、遅延レンダリングとの相性が悪い^[3]。深度剥離法 (en:Depth peeling) を用いれば、遅延レンダリングにおける順序非依存の透明度 (en:Order-independent transparency, OIT) を実現することができるが、追加バッチとGバッファのコストを犠牲にせざるを得ない。DirectX 10以降をサポートしているハードウェアでは大体バッチを実行してもリアルタイムのフレームレートを十分な速さで維持できる^[要出典]。OITが強く要求される場合においては、遅延シェーディングはそれでもなお同様の技術を用いた前方シェーディングよりも効果的である。

もう1つの深刻なデメリットとして、複数のマテリアルを使うのが困難だということが挙げられる^[4]。遅延シェーディングにおいて多数の異なるマテリアルを使うこと自体は可能だが、Gバッファに保存するためにはさらなるデータ領域が要求され、メモリ帯域を消費することになる^[5]。

さらにもう1つの深刻なデメリットがある。それはライティングの段階とジオメトリの段階を切り離しているため、ハードウェアアンチエイリアスは一定以上正確な結果を出せないことである。補間されたサブピクセルでは、位置、法線、および接線といった属性は無意味になる。この制限を乗り越えるための通常技術の1つとして、最終画像でポストエフェクトとしてエッジ検出を行ない、エッジをぼかすというものがある^[6]。しかし、近年^[いつ?]ではそれ以上に進歩的なポストプロセス・エッジスムージング技術が開発された。例を挙げればMLAA^[7] (中でもKILLZONE 3やen:Dragon Age 2に使われた)、FXAA^[8] (Crysis 2やF.E.A.R. 3、Duke Nukem Foreverで用いられた)、SRAA ^[9]、 DLAA^[10] (en:Star Wars: The Force Unleashed IIで用いられた)、ポストMSAA (Crysis 2でデフォルトのアンチエイリアス法として使われた) がある。他のポピュラーな技術にテンポラル・アンチエイリアシングがあり、Halo:Reachで使われた^[11]。DirectX 10ではシェーダーがマルチサンプル・レンダーターゲットにおいて個々のサンプルにアクセスできる機能が提供され、ハードウェアアンチエイリアスを遅延シェーディングで行なうことを可能にした（DirectX 10.1ではデプスバッファにもアクセス可能^[12]）。これらの機能はHDR輝度マッピングをアンチエイリアス済みのエッジに正確に適用することも可能にする（なお、これは前バージョンのAPIでは、アンチエイリアスのすべての利益が失われるかもしれない状況である）。

遅延ライティング

遅延ライティング (英: Light Pre-Pass、ライトプリパスとも) は遅延シェーディングを改変したものである^[13]。この技術は遅延シェーディングの2つのパスではなく3つのパスを用いる。シーンのジオメトリに関する第1パスではピクセルごとのライティングに必要な属性すなわち放射照度（英: irradiance、イラディアンス）のみをGバッファに書き込む。"遅延"パスはGバッファを参照しながらスクリーンスペース上でその時拡散反射および鏡面反射の光源データのみを出力する。最終パスでは遅延パスで生成した光源データを参照しながらシーンを再度レンダリングし、最終的なピクセルごとのシェーディング結果を出力する。遅延ライティングの明確なメリットはGバッファのサイズの劇的な削減にある。一方、明らかな追加コストは、シーンのジオメトリを1度ではなく2度レンダリングすることが必要ということである。遅延シェーディングにおける遅延パスは1つの組み合わさった放射輝度（英: radiance、ラディアンス）の値を出力するだけでよいが、追加のコストとして遅延ライティングにおける遅延パスは拡散反射・鏡面反射の放射照度を別々に出力しなければならない。

Gバッファのサイズの削減により、この技術は部分的にではあるが遅延シェーディングの深刻な欠点である、複数マテリアルの問題を克服することができる。また、解決できるもう1つの問題はMSAAである。遅延ライティングはDirectX 9世代のハードウェアでもMSAAと一緒に使うことができる。

商業ゲームで使われた遅延ライティング

この技術は大量の動的な照明の使用や必要なシェーダー命令の複雑さの削減に関してコントロールできるため、コンピュータゲームでその使用が増加している。以下に遅延ライティングを用いているゲームの例をいくつか挙げる。

ALAN WAKE
BioShock Infinite^[14]
Blur
Brink
ライオットアクトおよびライオットアクト 2^[15]
Crysis 2^[16]
DEAD SPACE^[17] およびDead Space 2^[18]
en:Deus Ex: Human Revolution ^[19]
Grand Theft Auto IV
Halo:Reach ^[20]
INFAMOUS〜悪名高き男〜およびInFAMOUS 2^[14]
LittleBigPlanetおよびLittleBigPlanet 2^[21]
シフト2 アンリーシュド ^[22]
S.T.A.L.K.E.R. SHADOW OF CHERNOBYL、Clear SkyおよびCall of Prypiat^[23]
レッド・デッド・リデンプション
RESISTANCEシリーズ（英語版）^[24]
スタークラフト2 ^[25]
アンチャーテッドおよびアンチャーテッド2^[26]
VANQUISH ^[27]
アサシンクリード III ^[28]

商業ゲームで使われた遅延シェーディング

遅延ライティングとは対照的に、この技術は多量のメモリや帯域を要求するためあまり人気はない。特にコンソールでは、メモリや帯域幅は強く限定され、しばしばボトルネックとなる。

ゲームエンジンにおける遅延技術

略歴

遅延シェーディングの考えは遡るとen:Michael Deeringとその同僚が1988年に書いた、"The triangle processor and normal vector shader: a VLSI system for high performance graphics"（「三角形のプロセッサと法線ベクトルシェーダー: ハイパフォーマンスグラフィックスのためのVLSIシステム」）という題名の論文^[45] で広められた。しかし、この論文では"Deferred"という単語は全く使われておらず、主要な発想は「各ピクセルがデプスレゾリューションの後に一度だけシェーディングされる」というものだった。我々が今日知っているような、Gバッファを使う遅延シェーディングは1990年の旧NTTヒューマンインタフェース研究所の斎藤隆文と高橋時市郎による論文で世に出された^[46]が、彼らも「遅延」という単語を使ってはいなかった。 2004年前後に遅延シェーディングに適したグラフィックスハードウェアの実現が見え始めた^[47]。その後この技術はコンピュータゲームのようなアプリケーション用に人気が出て、最終的に2008年から2010年あたりに主流となった^[48]。

脚注

^ http://kayru.org/articles/dssdo/
^ http://thecansin.com/Files/Deferred%20Rendering%20in%20XNA%204.pdf
^ “NVIDIA SDK 9.51 - Featured Code Samples”. NVIDIA (2007年1月17日). 2007年3月28日閲覧。
^ 4Gamer.net ― 次世代ゲーム機のグラフィックスはどうなる？ CEDEC 2012 ゲーム開発マニアックス～グラフィックス編
^ http://diaryofagraphicsprogrammer.blogspot.com/2008/03/light-pre-pass-renderer.html
^ “Deferred shading tutorial”. Pontifical Catholic University of Rio de Janeiro. 2008年2月14日閲覧。
^ http://igm.univ-mlv.fr/~biri/mlaa-gpu/TMLAA.pdf
^ http://www.ngohq.com/images/articles/fxaa/FXAA_WhitePaper.pdf
^ http://research.nvidia.com/publication/subpixel-reconstruction-antialiasing
^ http://and.intercon.ru/releases/talks/dlaagdc2011/
^ http://and.intercon.ru/releases/talks/dlaagdc2011/slides/
^ DirectX 10.1: "DirectX 10 and then some...", Richard Huddy, AMD, GDC 2008
^ http://www.realtimerendering.com/blog/deferred-lighting-approaches/
^ ^a ^b http://gamer.blorge.com/2010/11/21/bioshock-infinite-development-is-ps3-focused-and-uses-uncharted-2-tech/
^ http://www.eurogamer.net/articles/digitalfoundry-crackdown2-tech-interview
^ http://www.slideshare.net/guest11b095/a-bit-more-deferred-cry-engine3
^ “Dead Space by Electronic Arts”. NVIDIA. 2008年2月14日閲覧。
^ “Face-Off: Dead Space 2”. 2010年2月1日閲覧。
^ https://translate.google.com/translate?hl=en&sl=ja&tl=en&u=http%3A%2F%2Fgame.watch.impress.co.jp%2Fdocs%2Fseries%2F3dcg%2F20100922_395310.html
^ http://www.eurogamer.net/articles/digitalfoundry-halo-reach-tech-interview
^ http://www.digitalscrutiny.com/content/2011/01/littlebigplanet-2-tech-analysis/
^ http://www.eurogamer.net/articles/digitalfoundry-the-making-of-shift-2?page=2
^ Shishkovtsov, Oles (2005年3月7日). “GPU Gems 2: Chapter 9. Deferred Shading in S.T.A.L.K.E.R”. Nvidia. 2011年2月2日閲覧。
^ http://cmpmedia.vo.llnwd.net/o1/vault/gdc09/slides/gdc09_insomniac_prelighting.pdf
^ “StarCraft II Effects & techniques” (PDF). AMD. 2012年7月9日閲覧。
^ http://features.cgsociety.org/story_custom.php?story_id=5545
^ http://platinumgames.com/tag/deferred-rendering/
^ http://www.gameinformer.com/b/features/archive/2012/03/28/ac-iii-the-redesigned-anvil-engine.aspx
^ http://www.playsomnia.com/index.php?option=com_content&view=article&id=863:frictional-games-interview&catid=56:intervjui
^ http://www.slideshare.net/DICEStudio/spubased-deferred-shading-in-battlefield-3-for-playstation-3
^ http://www.guerrilla-games.com/publications/dr_kz2_rsx_dev07.pdf
^ http://www.eurogamer.net/articles/digitalfoundry-tech-interview-metro-2033?page=2
^ “History - Electric Sheep Games”. 14 April 2011閲覧。
^ “Deferred shading in Tabula Rasa”. NVIDIA. 2008年2月14日閲覧。
^ http://forums.steampowered.com/forums/showpost.php?p=16668774&postcount=5
^ http://forums.steampowered.com/forums/showpost.php?p=27599827&postcount=18
^ “Valve Developer Wiki - Dota 2”. 10 April 2012閲覧。
^ “CryENGINE 3 Specifications”. Crytek GmbH. 2009年3月27日時点のオリジナルよりアーカイブ。2009年3月12日閲覧。
^ “Infinity Development Journal – Deferred Lighting”. I-Novae Studios (2009年4月3日). 2011年1月26日閲覧。
^ Vosburgh, Ethan (2010年9月9日). “Unity 3 Feature Preview – Deferred Rendering”. Unity Technologies. 2011年1月26日閲覧。
^ “Lighting you up in Battlefield 3”. DICE (March 3, 2011). September 15, 2011閲覧。
^ “Unreal Engine 3 Showcase - Samaritan”. Epic Games (2011年3月10日). 2011年7月7日閲覧。
^ “GameStart – Feature List”. 2012年12月10日閲覧。
^ “Deferred lighting - Alien Swarm SDK” (2012年5月29日). 2012年5月29日閲覧。
^ Deering, Michael; Stephanie Winner, Bic Schediwy, Chris Duffy, Neil Hunt. “The triangle processor and normal vector shader: a VLSI system for high performance graphics”. ACM SIGGRAPH Computer Graphics (ACM Press) 22 (4): 21–30.
^ Saito, Takafumi; Tokiichiro Takahashi (1990). “Comprehensible rendering of 3-D shapes”. ACM SIGGRAPH Computer Graphics (ACM Press) 24 (4): 197–206. doi:10.1145/97880.97901.
^ “Deferred Shading” (PDF). NVIDIA. 2007年3月28日閲覧。
^ Klint, Josh. Deferred Rendering in Leadwerks Engine. Leadwerks.