post-processing.html 19 KB

123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121122123124125126127128129130131132133134135136137138139140141142143144145146147148149150151152153154155156157158159160161162163164165166167168169170171172173174175176177178179180181182183184185186187188189190191192193194195196197198199200201202203204205206207208209210211212213214215216217218219220221222223224225226227228229230231232233234235236237238239240241242243244245246247248249250251252253254255256257258259260261262263264265266
  1. <!DOCTYPE html><html lang="ja"><head>
  2. <meta charset="utf-8">
  3. <title>のポストプロセス</title>
  4. <meta name="viewport" content="width=device-width, user-scalable=no, minimum-scale=1.0, maximum-scale=1.0">
  5. <meta name="twitter:card" content="summary_large_image">
  6. <meta name="twitter:site" content="@threejs">
  7. <meta name="twitter:title" content="Three.js – のポストプロセス">
  8. <meta property="og:image" content="https://threejs.org/files/share.png">
  9. <link rel="shortcut icon" href="../../files/favicon_white.ico" media="(prefers-color-scheme: dark)">
  10. <link rel="shortcut icon" href="../../files/favicon.ico" media="(prefers-color-scheme: light)">
  11. <link rel="stylesheet" href="../resources/lesson.css">
  12. <link rel="stylesheet" href="../resources/lang.css">
  13. <!-- Import maps polyfill -->
  14. <!-- Remove this when import maps will be widely supported -->
  15. <script async src="https://unpkg.com/[email protected]/dist/es-module-shims.js"></script>
  16. <script type="importmap">
  17. {
  18. "imports": {
  19. "three": "../../build/three.module.js"
  20. }
  21. }
  22. </script>
  23. </head>
  24. <body>
  25. <div class="container">
  26. <div class="lesson-title">
  27. <h1>のポストプロセス</h1>
  28. </div>
  29. <div class="lesson">
  30. <div class="lesson-main">
  31. <p><em>ポストプロセス</em>とは、一般的には2D画像に何らかのエフェクトやフィルターを適用する事です。
  32. Three.jsの場合、たくさんのメッシュが入ったシーンがあり、そのシーンを2D画像にレンダリングします。
  33. 通常はその2D画像はキャンバスに直接レンダリングしブラウザに表示されますが、
  34. 代わりに<a href="rendertargets.html">レンダーターゲットにレンダリング</a>し、キャンバス描画前に<em>ポストプロセス</em>エフェクトを適用できます。
  35. メインシーンのレンダリング後に行われるため、ポストプロセスと呼ばれています。</p>
  36. <p>ポストプロセスの例としては、InstagramやPhotoshopのフィルターなどがあります。</p>
  37. <p>Three.jsには、ポストプロセスのパイプラインを設定するサンプルクラスがいくつかあります。
  38. 今回は最初に <code class="notranslate" translate="no">EffectComposer</code> を作成し、複数の <code class="notranslate" translate="no">Pass</code> オブジェクトを追加します。
  39. 次に <code class="notranslate" translate="no">EffectComposer.render</code> を呼び出し、シーンを <a href="rendertargets.html">レンダーターゲット</a>にレンダリングしてそれぞれの <code class="notranslate" translate="no">Pass</code> を適用します。</p>
  40. <p>それぞれの <code class="notranslate" translate="no">Pass</code> には、ビネットの追加、ブラーやブルームの適用、フィルムグレインの適用、色相、彩度、コントラストの調整などのポストプロセスを適用できます。
  41. 最後のレンダリングでポストプロセス結果をキャンバスにレンダリングします。</p>
  42. <p><code class="notranslate" translate="no">EffectComposer</code> 関数がどのようなものか理解するのは少し重要です。
  43. ここでは2つの<a href="rendertargets.html">レンダーターゲット</a>を作成します。
  44. これを<strong>rtA</strong>と<strong>rtB</strong>と呼ぶ事にしましょう。</p>
  45. <p>次に <code class="notranslate" translate="no">EffectComposer.addPass</code> を呼び出し、それぞれのPassに適用したい順番で追加します。
  46. Passは<em>次の図のように</em>適用されます。</p>
  47. <div class="threejs_center"><img src="../resources/images/threejs-postprocessing.svg" style="width: 600px"></div>
  48. <p><code class="notranslate" translate="no">RenderPass</code>に渡されたシーンは、まず<strong>rtA</strong>にレンダリングされ<strong>rtA</strong>は次のPassに渡されます。
  49. このPassは<strong>rtA</strong>を入力として使用し、<strong>rtB</strong>に結果を書き込みます。
  50. その後に<strong>rtB</strong>は次のPassに渡され、<strong>rtB</strong>を入力として使用し<strong>rtA</strong>に書き戻します。
  51. これは全てのPassを通ります。</p>
  52. <p>それぞれの <code class="notranslate" translate="no">Pass</code> には4つの基本的なオプションがあります。</p>
  53. <h2 id="-enabled-"><code class="notranslate" translate="no">enabled</code></h2>
  54. <p>このPassを使用するかどうか</p>
  55. <h2 id="-needsswap-"><code class="notranslate" translate="no">needsSwap</code></h2>
  56. <p>このPass終了後に <code class="notranslate" translate="no">rtA</code> と <code class="notranslate" translate="no">rtB</code> を入れ替えるかどうか</p>
  57. <h2 id="-clear-"><code class="notranslate" translate="no">clear</code></h2>
  58. <p>このPassをレンダリングする前にクリアするかどうか</p>
  59. <h2 id="-rendertoscreen-"><code class="notranslate" translate="no">renderToScreen</code></h2>
  60. <p>現在の出力先のレンダーターゲットではなく、キャンバスにレンダリングするかどうか。
  61. 通常は <code class="notranslate" translate="no">EffectComposer</code> に追加する最後のPassでtrueに設定する必要があります。</p>
  62. <p>基本的な例をまとめてみましょう。
  63. まずは<a href="responsive.html">レスポンシブデザインの記事</a>から例を挙げてみます。</p>
  64. <p>そのためにまず <code class="notranslate" translate="no">EffectComposer</code> を作成します。</p>
  65. <pre class="prettyprint showlinemods notranslate lang-js" translate="no">const composer = new EffectComposer(renderer);
  66. </pre>
  67. <p>次に最初のPassとして <code class="notranslate" translate="no">RenderPass</code> を追加し、最初のレンダーターゲットにカメラを使ってシーンをレンダリングします。</p>
  68. <pre class="prettyprint showlinemods notranslate lang-js" translate="no">composer.addPass(new RenderPass(scene, camera));
  69. </pre>
  70. <p>次に <code class="notranslate" translate="no">BloomPass</code> を追加します。
  71. <code class="notranslate" translate="no">BloomPass</code> は一般的には入力を小さなレンダーターゲットにレンダリングし、結果にブラーをかけます。
  72. そして、元の入力の上にブラーされた結果を追加します。
  73. これでシーンに <em>ブルーム</em> をかけます。</p>
  74. <pre class="prettyprint showlinemods notranslate lang-js" translate="no">const bloomPass = new BloomPass(
  75. 1, // strength
  76. 25, // kernel size
  77. 4, // sigma ?
  78. 256, // blur render target resolution
  79. );
  80. composer.addPass(bloomPass);
  81. </pre>
  82. <p>最終的には、元の入力の上にノイズとスキャンラインを描画する <code class="notranslate" translate="no">FilmPass</code> ができました。</p>
  83. <pre class="prettyprint showlinemods notranslate lang-js" translate="no">const filmPass = new FilmPass(
  84. 0.35, // noise intensity
  85. 0.025, // scanline intensity
  86. 648, // scanline count
  87. false, // grayscale
  88. );
  89. filmPass.renderToScreen = true;
  90. composer.addPass(filmPass);
  91. </pre>
  92. <p><code class="notranslate" translate="no">filmPass</code> は最後のPassなので、<code class="notranslate" translate="no">renderToScreen</code> プロパティをtrueに設定し、キャンバスにレンダリングするようにします。
  93. この設定がないと次のレンダーターゲットにレンダリングされます。</p>
  94. <p>これらのクラスを使用するには、以下をインポートする必要があります。</p>
  95. <pre class="prettyprint showlinemods notranslate lang-js" translate="no">import {EffectComposer} from 'three/addons/postprocessing/EffectComposer.js';
  96. import {RenderPass} from 'three/addons/postprocessing/RenderPass.js';
  97. import {BloomPass} from 'three/addons/postprocessing/BloomPass.js';
  98. import {FilmPass} from 'three/addons/postprocessing/FilmPass.js';
  99. </pre>
  100. <p>ほとんどのポストプロセスには <code class="notranslate" translate="no">EffectComposer.js</code> と <code class="notranslate" translate="no">RenderPass.js</code> が必須です。</p>
  101. <p>最後に <a href="/docs/#api/ja/renderers/WebGLRenderer.render"><code class="notranslate" translate="no">WebGLRenderer.render</code></a> の代わりに <code class="notranslate" translate="no">EffectComposer.render</code> を使用し、<code class="notranslate" translate="no">EffectComposer</code> にキャンバスのサイズを合わせます。</p>
  102. <pre class="prettyprint showlinemods notranslate lang-js" translate="no">-function render(now) {
  103. - time *= 0.001;
  104. +let then = 0;
  105. +function render(now) {
  106. + now *= 0.001; // convert to seconds
  107. + const deltaTime = now - then;
  108. + then = now;
  109. if (resizeRendererToDisplaySize(renderer)) {
  110. const canvas = renderer.domElement;
  111. camera.aspect = canvas.clientWidth / canvas.clientHeight;
  112. camera.updateProjectionMatrix();
  113. + composer.setSize(canvas.width, canvas.height);
  114. }
  115. cubes.forEach((cube, ndx) =&gt; {
  116. const speed = 1 + ndx * .1;
  117. - const rot = time * speed;
  118. + const rot = now * speed;
  119. cube.rotation.x = rot;
  120. cube.rotation.y = rot;
  121. });
  122. - renderer.render(scene, camera);
  123. + composer.render(deltaTime);
  124. requestAnimationFrame(render);
  125. }
  126. </pre>
  127. <p><code class="notranslate" translate="no">EffectComposer.render</code> は <code class="notranslate" translate="no">deltaTime</code> で最後のフレームのレンダリング後からの時間を秒単位で受け取ります。
  128. deltaTimeをアニメーションしてる様々なエフェクトに渡します。
  129. 今回は <code class="notranslate" translate="no">FilmPass</code> がアニメーションしています。</p>
  130. <p></p><div translate="no" class="threejs_example_container notranslate">
  131. <div><iframe class="threejs_example notranslate" translate="no" style=" " src="/manual/examples/resources/editor.html?url=/manual/examples/postprocessing.html"></iframe></div>
  132. <a class="threejs_center" href="/manual/examples/postprocessing.html" target="_blank">ここをクリックして別のウィンドウで開きます</a>
  133. </div>
  134. <p></p>
  135. <p>実行時にエフェクトパラメーターを変更するには、uniformの値を設定する必要があります。
  136. パラメータを調整するためのGUIを追加してみましょう。
  137. どの値を調整できるか把握するには、以下のコードを調べる必要があります。</p>
  138. <p><a href="https://github.com/mrdoob/three.js/blob/master/examples/jsm/postprocessing/BloomPass.js"><code class="notranslate" translate="no">BloomPass.js</code></a>の中でこの行を見つけました。</p>
  139. <pre class="prettyprint showlinemods notranslate lang-js" translate="no">this.copyUniforms[ "opacity" ].value = strength;
  140. </pre>
  141. <p>strengthを設定できます。</p>
  142. <pre class="prettyprint showlinemods notranslate lang-js" translate="no">bloomPass.copyUniforms.opacity.value = someValue;
  143. </pre>
  144. <p>同様に<a href="https://github.com/mrdoob/three.js/blob/master/examples/jsm/postprocessing/FilmPass.js"><code class="notranslate" translate="no">FilmPass.js</code></a>でこの行を見つけました。</p>
  145. <pre class="prettyprint showlinemods notranslate lang-js" translate="no">if ( grayscale !== undefined ) this.uniforms.grayscale.value = grayscale;
  146. if ( noiseIntensity !== undefined ) this.uniforms.nIntensity.value = noiseIntensity;
  147. if ( scanlinesIntensity !== undefined ) this.uniforms.sIntensity.value = scanlinesIntensity;
  148. if ( scanlinesCount !== undefined ) this.uniforms.sCount.value = scanlinesCount;
  149. </pre>
  150. <p>これでどのように設定するか、かなり明確になりました。</p>
  151. <p>これらの値を設定する簡単なGUIを作ってみましょう。</p>
  152. <pre class="prettyprint showlinemods notranslate lang-js" translate="no">import {GUI} from 'three/addons/libs/lil-gui.module.min.js';
  153. </pre>
  154. <p>そして</p>
  155. <pre class="prettyprint showlinemods notranslate lang-js" translate="no">const gui = new GUI();
  156. {
  157. const folder = gui.addFolder('BloomPass');
  158. folder.add(bloomPass.copyUniforms.opacity, 'value', 0, 2).name('strength');
  159. folder.open();
  160. }
  161. {
  162. const folder = gui.addFolder('FilmPass');
  163. folder.add(filmPass.uniforms.grayscale, 'value').name('grayscale');
  164. folder.add(filmPass.uniforms.nIntensity, 'value', 0, 1).name('noise intensity');
  165. folder.add(filmPass.uniforms.sIntensity, 'value', 0, 1).name('scanline intensity');
  166. folder.add(filmPass.uniforms.sCount, 'value', 0, 1000).name('scanline count');
  167. folder.open();
  168. }
  169. </pre>
  170. <p>これで設定を調整できるようになりました。</p>
  171. <p></p><div translate="no" class="threejs_example_container notranslate">
  172. <div><iframe class="threejs_example notranslate" translate="no" style=" " src="/manual/examples/resources/editor.html?url=/manual/examples/postprocessing-gui.html"></iframe></div>
  173. <a class="threejs_center" href="/manual/examples/postprocessing-gui.html" target="_blank">ここをクリックして別のウィンドウで開きます</a>
  174. </div>
  175. <p></p>
  176. <p>これはあなた自身のエフェクトを作る小さな1歩です。</p>
  177. <p>ポストプロセスエフェクトではシェーダーを使用します。
  178. シェーダーは<a href="https://www.khronos.org/files/opengles_shading_language.pdf">GLSL (Graphics Library Shading Language)</a>と呼ばれる言語で書かれています。
  179. この記事では、GLSL言語全体を解説するのはあまりにも大きなトピックです。
  180. <a href="https://webglfundamentals.org/webgl/lessons/webgl-shaders-and-glsl.html">この記事</a>と<a href="https://thebookofshaders.com/">このシェーダーの本</a>を参考にしてみて下さい。</p>
  181. <p>サンプルがあると便利だと思うので、簡単なGLSLのポストプロセスのシェーダーを作ってみましょう。
  182. 画像に色を乗算したものを作ります。</p>
  183. <p>Three.jsではポストプロセス用に <code class="notranslate" translate="no">ShaderPass</code> という便利なヘルパーを提供しています。
  184. 頂点シェーダー、フラグメントシェーダー、デフォルト入力を定義した情報を持つオブジェクトを取得します。
  185. 前のPassの結果を得るためにどのテクスチャから読み込むか、<code class="notranslate" translate="no">EffectComposer</code> のどこにレンダリングするかを設定します。</p>
  186. <p>前のPassの結果に色を乗算するシンプルなポストプロセスシェーダーです。</p>
  187. <pre class="prettyprint showlinemods notranslate lang-js" translate="no">const colorShader = {
  188. uniforms: {
  189. tDiffuse: { value: null },
  190. color: { value: new THREE.Color(0x88CCFF) },
  191. },
  192. vertexShader: `
  193. varying vec2 vUv;
  194. void main() {
  195. vUv = uv;
  196. gl_Position = projectionMatrix * modelViewMatrix * vec4(position, 1);
  197. }
  198. `,
  199. fragmentShader: `
  200. varying vec2 vUv;
  201. uniform sampler2D tDiffuse;
  202. uniform vec3 color;
  203. void main() {
  204. vec4 previousPassColor = texture2D(tDiffuse, vUv);
  205. gl_FragColor = vec4(
  206. previousPassColor.rgb * color,
  207. previousPassColor.a);
  208. }
  209. `,
  210. };
  211. </pre>
  212. <p>上記の <code class="notranslate" translate="no">tDiffuse</code> は <code class="notranslate" translate="no">ShaderPass</code> が前のPassの結果テクスチャを渡す名前です。
  213. <code class="notranslate" translate="no">color</code> を Three.jsの <a href="/docs/#api/ja/math/Color"><code class="notranslate" translate="no">Color</code></a> として宣言します。</p>
  214. <p>次に頂点シェーダーが必要です。
  215. ポストプロセスでは上記コードの頂点シェーダーは標準的なものであり、ほとんど変更する必要はありません。
  216. あまり詳しく説明しませんが(上記のリンク先の記事を参照してください)、
  217. 変数 <code class="notranslate" translate="no">uv</code>, <code class="notranslate" translate="no">projectionMatrix</code>, <code class="notranslate" translate="no">modelViewMatrix</code>, <code class="notranslate" translate="no">position</code> は全てThree.jsによって魔法のように追加されています。</p>
  218. <p>最後にフラグメントシェーダーを作成します。この中で前のPassのピクセルカラーを次の行で取得します。</p>
  219. <pre class="prettyprint showlinemods notranslate lang-glsl" translate="no">vec4 previousPassColor = texture2D(tDiffuse, vUv);
  220. </pre>
  221. <p>これに色を掛けて <code class="notranslate" translate="no">gl_FragColor</code> を設定します。</p>
  222. <pre class="prettyprint showlinemods notranslate lang-glsl" translate="no">gl_FragColor = vec4(
  223. previousPassColor.rgb * color,
  224. previousPassColor.a);
  225. </pre>
  226. <p>3つ色の設定用に簡単なGUIを追加します。</p>
  227. <pre class="prettyprint showlinemods notranslate lang-js" translate="no">const gui = new GUI();
  228. gui.add(colorPass.uniforms.color.value, 'r', 0, 4).name('red');
  229. gui.add(colorPass.uniforms.color.value, 'g', 0, 4).name('green');
  230. gui.add(colorPass.uniforms.color.value, 'b', 0, 4).name('blue');
  231. </pre>
  232. <p>色で乗算するシンプルなポストプロセスエフェクトができました。</p>
  233. <p></p><div translate="no" class="threejs_example_container notranslate">
  234. <div><iframe class="threejs_example notranslate" translate="no" style=" " src="/manual/examples/resources/editor.html?url=/manual/examples/postprocessing-custom.html"></iframe></div>
  235. <a class="threejs_center" href="/manual/examples/postprocessing-custom.html" target="_blank">ここをクリックして別のウィンドウで開きます</a>
  236. </div>
  237. <p></p>
  238. <p>GLSLやカスタムシェーダーの詳細は、ネット上にたくさんの記事があります。
  239. WebGL自体がどのように動作するかを知りたいならば、<a href="https://webglfundamentals.org">これらの記事</a>をチェックしてみて下さい。
  240. もう1つの素晴らしいリソースは、<a href="https://github.com/mrdoob/three.js/tree/master/examples/jsm/shaders">THREE.jsレポートの既存ポストプロセスシェーダーを読み解く</a>事です。
  241. 複雑なものもいくつかありますが、小さいものから始めるとどのように動作するかのアイデアを得る事ができます。</p>
  242. <p>残念ながらThree.jsレポートにあるほとんどのポストプロセスエフェクトは文書化されていないので、使用するには<a href="https://github.com/mrdoob/three.js/tree/master/examples">この例</a>か
  243. <a href="https://github.com/mrdoob/three.js/tree/master/examples/jsm/postprocessing">エフェクト自体のコード</a>を読んで下さい。
  244. これらのシンプルな例と<a href="rendertargets.html">レンダーターゲット</a>の記事がポストプロセスを始めるのに十分な知識を提供してくれると思います。</p>
  245. </div>
  246. </div>
  247. </div>
  248. <script src="../resources/prettify.js"></script>
  249. <script src="../resources/lesson.js"></script>
  250. </body></html>