webxr-point-to-select.html 18 KB

123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121122123124125126127128129130131132133134135136137138139140141142143144145146147148149150151152153154155156157158159160161162163164165166167168169170171172173174175176177178179180181182183184185186187188189190191192193194195196197198199200201202203204205206207208209210211212213214215216217218219220221222223224225226227228229230231232233234235236237238239240241242243244245246247248249250251252253254255256257258259260261262263264265266267268269270271272273274275276277278279280281282283284285286287288289290291292293294295296297298299300301302303304305306307308309310311312313314315316317318319320321322323324325326327328329330331332333334335336337338339340341342343344345346347348349350351352353354355356357
  1. <!DOCTYPE html><html lang="ko"><head>
  2. <meta charset="utf-8">
  3. <title>VR - 3DOF Point to Select</title>
  4. <meta name="viewport" content="width=device-width, user-scalable=no, minimum-scale=1.0, maximum-scale=1.0">
  5. <meta name="twitter:card" content="summary_large_image">
  6. <meta name="twitter:site" content="@threejs">
  7. <meta name="twitter:title" content="Three.js – VR - 3DOF Point to Select">
  8. <meta property="og:image" content="https://threejs.org/files/share.png">
  9. <link rel="shortcut icon" href="../../files/favicon_white.ico" media="(prefers-color-scheme: dark)">
  10. <link rel="shortcut icon" href="../../files/favicon.ico" media="(prefers-color-scheme: light)">
  11. <link rel="stylesheet" href="../resources/lesson.css">
  12. <link rel="stylesheet" href="../resources/lang.css">
  13. <!-- Import maps polyfill -->
  14. <!-- Remove this when import maps will be widely supported -->
  15. <script async src="https://unpkg.com/[email protected]/dist/es-module-shims.js"></script>
  16. <script type="importmap">
  17. {
  18. "imports": {
  19. "three": "../../build/three.module.js"
  20. }
  21. }
  22. </script>
  23. <link rel="stylesheet" href="/manual/ko/lang.css">
  24. </head>
  25. <body>
  26. <div class="container">
  27. <div class="lesson-title">
  28. <h1>VR - 3DOF Point to Select</h1>
  29. </div>
  30. <div class="lesson">
  31. <div class="lesson-main">
  32. <p><strong>NOTE: 이 페이지의 예시에는 포인팅 장치가 있는 VR 지원 장치가 필요합니다.
  33. 포인팅 장치가 있는 VR 지원 장치가 없으면 작업을 수행할 수 없으며
  34. 그 이유를 <a href="webxr.html">이 글에서</a> 확인할 수 있습니다.
  35. </strong></p>
  36. <p><a href="webxr-look-to-select.html">이전 글</a>에서는 사용자가 보는 것을 통해 항목을 가리키며 선택할 수 있도록 하는 매우 간단한 VR 예제를 살펴보았습니다.
  37. 이 글에서는 한 단계 더 나아가 사용자가 포인팅 장치를 사용하여 항목을 선택할 수 있도록 해보겠습니다.</p>
  38. <p>Three.js는 2개의 컨트롤러 개체를 VR로 제공하여 비교적 쉽게 만들며 단일 3DOF 컨트롤러와 2개의 6DOF 컨트롤러의 경우를 모두 처리하려고 합니다.
  39. 각 컨트롤러는 컨트롤러의 방향과 위치를 제공하는 <a href="/docs/#api/ko/core/Object3D"><code class="notranslate" translate="no">Object3D</code></a> 개체입니다.
  40. 또한 사용자가 컨트롤러의 "메인" 버튼을 누르기 시작하고, 누르고, 누르기를 중지할 때(끝낼 때) <code class="notranslate" translate="no">selectstart</code>, <code class="notranslate" translate="no">select</code> 및 <code class="notranslate" translate="no">selectend</code> 이벤트를 제공합니다.</p>
  41. <p><a href="webxr-look-to-select.html">이전 글</a>의 마지막 예시에서 <code class="notranslate" translate="no">PickHelper</code>를 <code class="notranslate" translate="no">ControllerPickHelper</code>로 변경해 보겠습니다.</p>
  42. <p>이번의 새로운 구현에서는 선택된 개체를 제공하는 <code class="notranslate" translate="no">select</code> 이벤트를 내보낼 것입니다.
  43. 따라서 개체를 사용하기 위해 이 작업을 수행해야 합니다.</p>
  44. <pre class="prettyprint showlinemods notranslate lang-js" translate="no">const pickHelper = new ControllerPickHelper(scene);
  45. pickHelper.addEventListener('select', (event) =&gt; {
  46. event.selectedObject.visible = false;
  47. const partnerObject = meshToMeshMap.get(event.selectedObject);
  48. partnerObject.visible = true;
  49. });
  50. </pre>
  51. <p>이전의 코드를 떠올려 보면 상자와 구를 서로 매핑하면 <code class="notranslate" translate="no">meshToMeshMap</code>를 통해 박스와 구를 찾을 수 있으므로
  52. 여기서는 선택된 개체를 숨기고 파트너의 숨김을 해제합니다.</p>
  53. <p> <code class="notranslate" translate="no">ControllerPickHelper</code>의 실제 구현에 대해서는 먼저 VR 컨트롤러 개체를 scene에 추가하고
  54. 이러한 개체에 사용자가 가리키는 위치를 표시하는 데 사용할 수 있는 3D 라인을 추가하고, 컨트롤러와 라인을 모두 저장해야 합니다.</p>
  55. <pre class="prettyprint showlinemods notranslate lang-js" translate="no">class ControllerPickHelper {
  56. constructor(scene) {
  57. const pointerGeometry = new THREE.BufferGeometry().setFromPoints([
  58. new THREE.Vector3(0, 0, 0),
  59. new THREE.Vector3(0, 0, -1),
  60. ]);
  61. this.controllers = [];
  62. for (let i = 0; i &lt; 2; ++i) {
  63. const controller = renderer.xr.getController(i);
  64. scene.add(controller);
  65. const line = new THREE.Line(pointerGeometry);
  66. line.scale.z = 5;
  67. controller.add(line);
  68. this.controllers.push({controller, line});
  69. }
  70. }
  71. }
  72. </pre>
  73. <p>다른 어떠한 작업을 수행하지 않고 이 작업만으로도
  74. 사용자의 포인팅 장치가 어디에 있고 어느 쪽을 가리키고 있는지를 보여주는 scene에서 한 두개의 라인이 제공됩니다.</p>
  75. <p>다음에는 컨트롤러로 선택하는 코드를 추가해봅시다. 카메라가 아닌 것으로 선택하는 것은 이번이 처음입니다.
  76. <a href="picking.html">피킹에 관한 글</a>에서는 마우스나 손가락을 사용하여 선택하는 것이 카메라에서 화면으로 전달된다는 것을 의미했습니다.
  77. <a href="webxr-look-to-select.html">이전 글</a>에서는 카메라에 나오는 사용자가 어떤 식으로 다시 보이는지를 기준으로 선택했습니다.
  78. 이번에는 카메라를 사용하지 않기 때문에 컨트롤러의 위치를 통해 선택합니다.</p>
  79. <pre class="prettyprint showlinemods notranslate lang-js" translate="no">class ControllerPickHelper {
  80. constructor(scene) {
  81. + this.raycaster = new THREE.Raycaster();
  82. + this.objectToColorMap = new Map();
  83. + this.controllerToObjectMap = new Map();
  84. + this.tempMatrix = new THREE.Matrix4();
  85. const pointerGeometry = new THREE.BufferGeometry().setFromPoints([
  86. new THREE.Vector3(0, 0, 0),
  87. new THREE.Vector3(0, 0, -1),
  88. ]);
  89. this.controllers = [];
  90. for (let i = 0; i &lt; 2; ++i) {
  91. const controller = renderer.xr.getController(i);
  92. scene.add(controller);
  93. const line = new THREE.Line(pointerGeometry);
  94. line.scale.z = 5;
  95. controller.add(line);
  96. this.controllers.push({controller, line});
  97. }
  98. }
  99. + update(scene, time) {
  100. + this.reset();
  101. + for (const {controller, line} of this.controllers) {
  102. + // cast a ray through the from the controller
  103. + this.tempMatrix.identity().extractRotation(controller.matrixWorld);
  104. + this.raycaster.ray.origin.setFromMatrixPosition(controller.matrixWorld);
  105. + this.raycaster.ray.direction.set(0, 0, -1).applyMatrix4(this.tempMatrix);
  106. + // get the list of objects the ray intersected
  107. + const intersections = this.raycaster.intersectObjects(scene.children);
  108. + if (intersections.length) {
  109. + const intersection = intersections[0];
  110. + // make the line touch the object
  111. + line.scale.z = intersection.distance;
  112. + // pick the first object. It's the closest one
  113. + const pickedObject = intersection.object;
  114. + // save which object this controller picked
  115. + this.controllerToObjectMap.set(controller, pickedObject);
  116. + // highlight the object if we haven't already
  117. + if (this.objectToColorMap.get(pickedObject) === undefined) {
  118. + // save its color
  119. + this.objectToColorMap.set(pickedObject, pickedObject.material.emissive.getHex());
  120. + // set its emissive color to flashing red/yellow
  121. + pickedObject.material.emissive.setHex((time * 8) % 2 &gt; 1 ? 0xFF2000 : 0xFF0000);
  122. + }
  123. + } else {
  124. + line.scale.z = 5;
  125. + }
  126. + }
  127. + }
  128. }
  129. </pre>
  130. <p><a href="/docs/#api/ko/core/Raycaster"><code class="notranslate" translate="no">Raycaster</code></a>를 사용하기 전에는 그랬지만 이번에는 컨트롤러에서 ray를 가져옵니다.
  131. 이전 <code class="notranslate" translate="no">PickHelper</code>에서는 한 가지만 선택할 수 있었지만, 여기서는 한 손에 하나씩 최대 2개의 컨트롤러가 있습니다.
  132. 우리는 각 컨트롤러가 보고 있는 개체를 <code class="notranslate" translate="no">controllerToObjectMap</code>에 저장해야 합니다.
  133. 또한 원래 방사체의 색을 <code class="notranslate" translate="no">objectToColorMap</code>에 저장하여 선이 가리키는 모든 부분에 닿을 수 있을 만큼 길게 만듭니다.</p>
  134. <p>모든 프레임에서 이러한 설정들을 재설정하려면 몇 가지 코드를 추가해야 합니다.</p>
  135. <pre class="prettyprint showlinemods notranslate lang-js" translate="no">class ControllerPickHelper {
  136. ...
  137. + _reset() {
  138. + // restore the colors
  139. + this.objectToColorMap.forEach((color, object) =&gt; {
  140. + object.material.emissive.setHex(color);
  141. + });
  142. + this.objectToColorMap.clear();
  143. + this.controllerToObjectMap.clear();
  144. + }
  145. update(scene, time) {
  146. + this._reset();
  147. ...
  148. }
  149. </pre>
  150. <p>다음으로 우리는 사용자가 컨트롤러를 클릭했을 때 <code class="notranslate" translate="no">select</code> 이벤트를 내보내야 합니다.
  151. 이를위해 three.js의 <a href="/docs/#api/ko/core/EventDispatcher"><code class="notranslate" translate="no">EventDispatcher</code></a>를 확장한 후 컨트롤러에서 <code class="notranslate" translate="no">select</code> 이벤트를 확인하고
  152. 해당 컨트롤러가 가리키는 것이 있으면 해당 컨트롤러가 가리키는 <code class="notranslate" translate="no">select</code> 이벤트를 내보냅니다.</p>
  153. <pre class="prettyprint showlinemods notranslate lang-js" translate="no">-class ControllerPickHelper {
  154. +class ControllerPickHelper extends THREE.EventDispatcher {
  155. constructor(scene) {
  156. + super();
  157. this.raycaster = new THREE.Raycaster();
  158. this.objectToColorMap = new Map(); // object to save color and picked object
  159. this.controllerToObjectMap = new Map();
  160. this.tempMatrix = new THREE.Matrix4();
  161. const pointerGeometry = new THREE.BufferGeometry().setFromPoints([
  162. new THREE.Vector3(0, 0, 0),
  163. new THREE.Vector3(0, 0, -1),
  164. ]);
  165. this.controllers = [];
  166. for (let i = 0; i &lt; 2; ++i) {
  167. const controller = renderer.xr.getController(i);
  168. + controller.addEventListener('select', (event) =&gt; {
  169. + const controller = event.target;
  170. + const selectedObject = this.controllerToObjectMap.get(controller);
  171. + if (selectedObject) {
  172. + this.dispatchEvent({type: 'select', controller, selectedObject});
  173. + }
  174. + });
  175. scene.add(controller);
  176. const line = new THREE.Line(pointerGeometry);
  177. line.scale.z = 5;
  178. controller.add(line);
  179. this.controllers.push({controller, line});
  180. }
  181. }
  182. }
  183. </pre>
  184. <p>이제 render loop에서 <code class="notranslate" translate="no">update</code>만 호출하면 됩니다.</p>
  185. <pre class="prettyprint showlinemods notranslate lang-js" translate="no">function render(time) {
  186. ...
  187. + pickHelper.update(scene, time);
  188. renderer.render(scene, camera);
  189. }
  190. </pre>
  191. <p>그리고 컨트롤러가 있는 VR 장치가 있다고 가정하면 컨트롤러를 사용하여 선택할 수 있습니다.</p>
  192. <p></p><div translate="no" class="threejs_example_container notranslate">
  193. <div><iframe class="threejs_example notranslate" translate="no" style=" " src="/manual/examples/resources/editor.html?url=/manual/examples/webxr-point-to-select.html"></iframe></div>
  194. <a class="threejs_center" href="/manual/examples/webxr-point-to-select.html" target="_blank">새 탭에서 보기</a>
  195. </div>
  196. <p></p>
  197. <p>만약 우리가 물체를 움직일 수 있기를 원한다면 어떨까요?</p>
  198. <p>그것은 비교적 쉽습니다.
  199. 컨트롤러의 <code class="notranslate" translate="no">select</code> 수신기 코드를 함수 안으로 이동하여 두가지 이상의 용도로 그것을 사용할 수 있도록 합니다.</p>
  200. <pre class="prettyprint showlinemods notranslate lang-js" translate="no">class ControllerPickHelper extends THREE.EventDispatcher {
  201. constructor(scene) {
  202. super();
  203. ...
  204. this.controllers = [];
  205. + const selectListener = (event) =&gt; {
  206. + const controller = event.target;
  207. + const selectedObject = this.controllerToObjectMap.get(event.target);
  208. + if (selectedObject) {
  209. + this.dispatchEvent({type: 'select', controller, selectedObject});
  210. + }
  211. + };
  212. for (let i = 0; i &lt; 2; ++i) {
  213. const controller = renderer.xr.getController(i);
  214. - controller.addEventListener('select', (event) =&gt; {
  215. - const controller = event.target;
  216. - const selectedObject = this.controllerToObjectMap.get(event.target);
  217. - if (selectedObject) {
  218. - this.dispatchEvent({type: 'select', controller, selectedObject});
  219. - }
  220. - });
  221. + controller.addEventListener('select', selectListener);
  222. ...
  223. </pre>
  224. <p>이제 이것을 <code class="notranslate" translate="no">selectstart</code>와 <code class="notranslate" translate="no">select</code> 모두에 사용해 봅시다.</p>
  225. <pre class="prettyprint showlinemods notranslate lang-js" translate="no">class ControllerPickHelper extends THREE.EventDispatcher {
  226. constructor(scene) {
  227. super();
  228. ...
  229. this.controllers = [];
  230. const selectListener = (event) =&gt; {
  231. const controller = event.target;
  232. const selectedObject = this.controllerToObjectMap.get(event.target);
  233. if (selectedObject) {
  234. - this.dispatchEvent({type: 'select', controller, selectedObject});
  235. + this.dispatchEvent({type: event.type, controller, selectedObject});
  236. }
  237. };
  238. for (let i = 0; i &lt; 2; ++i) {
  239. const controller = renderer.xr.getController(i);
  240. controller.addEventListener('select', selectListener);
  241. controller.addEventListener('selectstart', selectListener);
  242. ...
  243. </pre>
  244. <p>사용자가 컨트롤러의 버튼을 놓을 때 three.js가 전송하는 <code class="notranslate" translate="no">selectend</code> 이벤트도 전달해 봅시다.</p>
  245. <pre class="prettyprint showlinemods notranslate lang-js" translate="no">class ControllerPickHelper extends THREE.EventDispatcher {
  246. constructor(scene) {
  247. super();
  248. ...
  249. this.controllers = [];
  250. const selectListener = (event) =&gt; {
  251. const controller = event.target;
  252. const selectedObject = this.controllerToObjectMap.get(event.target);
  253. if (selectedObject) {
  254. this.dispatchEvent({type: event.type, controller, selectedObject});
  255. }
  256. };
  257. + const endListener = (event) =&gt; {
  258. + const controller = event.target;
  259. + this.dispatchEvent({type: event.type, controller});
  260. + };
  261. for (let i = 0; i &lt; 2; ++i) {
  262. const controller = renderer.xr.getController(i);
  263. controller.addEventListener('select', selectListener);
  264. controller.addEventListener('selectstart', selectListener);
  265. + controller.addEventListener('selectend', endListener);
  266. ...
  267. </pre>
  268. <p>이제 코드를 변경하여 <code class="notranslate" translate="no">selectstart</code> 이벤트가 발생하면 선택한 개체를 scene에서 제거하고 컨트롤러의 하위 개체로 만듭니다.
  269. 즉, 컨트롤러와 함께 이동합니다. <code class="notranslate" translate="no">selectend</code>이벤트를 받게 되면 다시 scene에 넣을 것입니다.</p>
  270. <pre class="prettyprint showlinemods notranslate lang-js" translate="no">const pickHelper = new ControllerPickHelper(scene);
  271. -pickHelper.addEventListener('select', (event) =&gt; {
  272. - event.selectedObject.visible = false;
  273. - const partnerObject = meshToMeshMap.get(event.selectedObject);
  274. - partnerObject.visible = true;
  275. -});
  276. +const controllerToSelection = new Map();
  277. +pickHelper.addEventListener('selectstart', (event) =&gt; {
  278. + const {controller, selectedObject} = event;
  279. + const existingSelection = controllerToSelection.get(controller);
  280. + if (!existingSelection) {
  281. + controllerToSelection.set(controller, {
  282. + object: selectedObject,
  283. + parent: selectedObject.parent,
  284. + });
  285. + controller.attach(selectedObject);
  286. + }
  287. +});
  288. +
  289. +pickHelper.addEventListener('selectend', (event) =&gt; {
  290. + const {controller} = event;
  291. + const selection = controllerToSelection.get(controller);
  292. + if (selection) {
  293. + controllerToSelection.delete(controller);
  294. + selection.parent.attach(selection.object);
  295. + }
  296. +});
  297. </pre>
  298. <p>한 개체가 선택되면 해당 개체와 원래의 부모 개체가 저장됩니다.
  299. 사용자가 작업을 마치면 개체를 다시 돌려놓을 수 있습니다.</p>
  300. <p><a href="/docs/#api/ko/core/Object3D.attach"><code class="notranslate" translate="no">Object3D.attach</code></a>를 사용하여 선택한 개체를 재부모화 합니다.
  301. 이러한 기능을 통해 scene에서 객체의 방향과 위치를 변경하지 않고도 객체의 부모를 변경할 수 있습니다.</p>
  302. <p>그리고 우리는 이를 통해 6DOF컨트롤러로 물체를 이동하거나 3DOF 컨트롤러로 방향을 전환할 수도 있을 것입니다.</p>
  303. <p></p><div translate="no" class="threejs_example_container notranslate">
  304. <div><iframe class="threejs_example notranslate" translate="no" style=" " src="/manual/examples/resources/editor.html?url=/manual/examples/webxr-point-to-select-w-move.html"></iframe></div>
  305. <a class="threejs_center" href="/manual/examples/webxr-point-to-select-w-move.html" target="_blank">새 탭에서 보기</a>
  306. </div>
  307. <p></p>
  308. <p>솔직하게 말해서 나는 이 <code class="notranslate" translate="no">ControllerPickHelper</code>가 코드를 구성하는 가장 좋은 방법이라고 확신할 수 없습니다.
  309. 하지만 이것은 three.js의 VR에서 작동하는 간단한 작업들의 다양한 부분을 보여주는데 유용합니다.</p>
  310. </div>
  311. </div>
  312. </div>
  313. <script src="../resources/prettify.js"></script>
  314. <script src="../resources/lesson.js"></script>
  315. </body></html>