webxr-point-to-select.html 17 KB

123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121122123124125126127128129130131132133134135136137138139140141142143144145146147148149150151152153154155156157158159160161162163164165166167168169170171172173174175176177178179180181182183184185186187188189190191192193194195196197198199200201202203204205206207208209210211212213214215216217218219220221222223224225226227228229230231232233234235236237238239240241242243244245246247248249250251252253254255256257258259260261262263264265266267268269270271272273274275276277278279280281282283284285286287288289290291292293294295296297298299300301302303304305306307308309310311312313314315316317318319320321322323324325326327328329330331332333334335336337338339340341342343344345346347348349350351352353
  1. <!DOCTYPE html><html lang="ko"><head>
  2. <meta charset="utf-8">
  3. <title>VR - 3DOF Point to Select</title>
  4. <meta name="viewport" content="width=device-width, user-scalable=no, minimum-scale=1.0, maximum-scale=1.0">
  5. <meta name="twitter:card" content="summary_large_image">
  6. <meta name="twitter:site" content="@threejs">
  7. <meta name="twitter:title" content="Three.js – VR - 3DOF Point to Select">
  8. <meta property="og:image" content="https://threejs.org/files/share.png">
  9. <link rel="shortcut icon" href="../../files/favicon_white.ico" media="(prefers-color-scheme: dark)">
  10. <link rel="shortcut icon" href="../../files/favicon.ico" media="(prefers-color-scheme: light)">
  11. <link rel="stylesheet" href="../resources/lesson.css">
  12. <link rel="stylesheet" href="../resources/lang.css">
  13. <script type="importmap">
  14. {
  15. "imports": {
  16. "three": "../../build/three.module.js"
  17. }
  18. }
  19. </script>
  20. <link rel="stylesheet" href="/manual/ko/lang.css">
  21. </head>
  22. <body>
  23. <div class="container">
  24. <div class="lesson-title">
  25. <h1>VR - 3DOF Point to Select</h1>
  26. </div>
  27. <div class="lesson">
  28. <div class="lesson-main">
  29. <p><strong>NOTE: 이 페이지의 예시에는 포인팅 장치가 있는 VR 지원 장치가 필요합니다.
  30. 포인팅 장치가 있는 VR 지원 장치가 없으면 작업을 수행할 수 없으며
  31. 그 이유를 <a href="webxr.html">이 글에서</a> 확인할 수 있습니다.
  32. </strong></p>
  33. <p><a href="webxr-look-to-select.html">이전 글</a>에서는 사용자가 보는 것을 통해 항목을 가리키며 선택할 수 있도록 하는 매우 간단한 VR 예제를 살펴보았습니다.
  34. 이 글에서는 한 단계 더 나아가 사용자가 포인팅 장치를 사용하여 항목을 선택할 수 있도록 해보겠습니다.</p>
  35. <p>Three.js는 2개의 컨트롤러 개체를 VR로 제공하여 비교적 쉽게 만들며 단일 3DOF 컨트롤러와 2개의 6DOF 컨트롤러의 경우를 모두 처리하려고 합니다.
  36. 각 컨트롤러는 컨트롤러의 방향과 위치를 제공하는 <a href="/docs/#api/ko/core/Object3D"><code class="notranslate" translate="no">Object3D</code></a> 개체입니다.
  37. 또한 사용자가 컨트롤러의 "메인" 버튼을 누르기 시작하고, 누르고, 누르기를 중지할 때(끝낼 때) <code class="notranslate" translate="no">selectstart</code>, <code class="notranslate" translate="no">select</code> 및 <code class="notranslate" translate="no">selectend</code> 이벤트를 제공합니다.</p>
  38. <p><a href="webxr-look-to-select.html">이전 글</a>의 마지막 예시에서 <code class="notranslate" translate="no">PickHelper</code>를 <code class="notranslate" translate="no">ControllerPickHelper</code>로 변경해 보겠습니다.</p>
  39. <p>이번의 새로운 구현에서는 선택된 개체를 제공하는 <code class="notranslate" translate="no">select</code> 이벤트를 내보낼 것입니다.
  40. 따라서 개체를 사용하기 위해 이 작업을 수행해야 합니다.</p>
  41. <pre class="prettyprint showlinemods notranslate lang-js" translate="no">const pickHelper = new ControllerPickHelper(scene);
  42. pickHelper.addEventListener('select', (event) =&gt; {
  43. event.selectedObject.visible = false;
  44. const partnerObject = meshToMeshMap.get(event.selectedObject);
  45. partnerObject.visible = true;
  46. });
  47. </pre>
  48. <p>이전의 코드를 떠올려 보면 상자와 구를 서로 매핑하면 <code class="notranslate" translate="no">meshToMeshMap</code>를 통해 박스와 구를 찾을 수 있으므로
  49. 여기서는 선택된 개체를 숨기고 파트너의 숨김을 해제합니다.</p>
  50. <p> <code class="notranslate" translate="no">ControllerPickHelper</code>의 실제 구현에 대해서는 먼저 VR 컨트롤러 개체를 scene에 추가하고
  51. 이러한 개체에 사용자가 가리키는 위치를 표시하는 데 사용할 수 있는 3D 라인을 추가하고, 컨트롤러와 라인을 모두 저장해야 합니다.</p>
  52. <pre class="prettyprint showlinemods notranslate lang-js" translate="no">class ControllerPickHelper {
  53. constructor(scene) {
  54. const pointerGeometry = new THREE.BufferGeometry().setFromPoints([
  55. new THREE.Vector3(0, 0, 0),
  56. new THREE.Vector3(0, 0, -1),
  57. ]);
  58. this.controllers = [];
  59. for (let i = 0; i &lt; 2; ++i) {
  60. const controller = renderer.xr.getController(i);
  61. scene.add(controller);
  62. const line = new THREE.Line(pointerGeometry);
  63. line.scale.z = 5;
  64. controller.add(line);
  65. this.controllers.push({controller, line});
  66. }
  67. }
  68. }
  69. </pre>
  70. <p>다른 어떠한 작업을 수행하지 않고 이 작업만으로도
  71. 사용자의 포인팅 장치가 어디에 있고 어느 쪽을 가리키고 있는지를 보여주는 scene에서 한 두개의 라인이 제공됩니다.</p>
  72. <p>다음에는 컨트롤러로 선택하는 코드를 추가해봅시다. 카메라가 아닌 것으로 선택하는 것은 이번이 처음입니다.
  73. <a href="picking.html">피킹에 관한 글</a>에서는 마우스나 손가락을 사용하여 선택하는 것이 카메라에서 화면으로 전달된다는 것을 의미했습니다.
  74. <a href="webxr-look-to-select.html">이전 글</a>에서는 카메라에 나오는 사용자가 어떤 식으로 다시 보이는지를 기준으로 선택했습니다.
  75. 이번에는 카메라를 사용하지 않기 때문에 컨트롤러의 위치를 통해 선택합니다.</p>
  76. <pre class="prettyprint showlinemods notranslate lang-js" translate="no">class ControllerPickHelper {
  77. constructor(scene) {
  78. + this.raycaster = new THREE.Raycaster();
  79. + this.objectToColorMap = new Map();
  80. + this.controllerToObjectMap = new Map();
  81. + this.tempMatrix = new THREE.Matrix4();
  82. const pointerGeometry = new THREE.BufferGeometry().setFromPoints([
  83. new THREE.Vector3(0, 0, 0),
  84. new THREE.Vector3(0, 0, -1),
  85. ]);
  86. this.controllers = [];
  87. for (let i = 0; i &lt; 2; ++i) {
  88. const controller = renderer.xr.getController(i);
  89. scene.add(controller);
  90. const line = new THREE.Line(pointerGeometry);
  91. line.scale.z = 5;
  92. controller.add(line);
  93. this.controllers.push({controller, line});
  94. }
  95. }
  96. + update(scene, time) {
  97. + this.reset();
  98. + for (const {controller, line} of this.controllers) {
  99. + // cast a ray through the from the controller
  100. + this.tempMatrix.identity().extractRotation(controller.matrixWorld);
  101. + this.raycaster.ray.origin.setFromMatrixPosition(controller.matrixWorld);
  102. + this.raycaster.ray.direction.set(0, 0, -1).applyMatrix4(this.tempMatrix);
  103. + // get the list of objects the ray intersected
  104. + const intersections = this.raycaster.intersectObjects(scene.children);
  105. + if (intersections.length) {
  106. + const intersection = intersections[0];
  107. + // make the line touch the object
  108. + line.scale.z = intersection.distance;
  109. + // pick the first object. It's the closest one
  110. + const pickedObject = intersection.object;
  111. + // save which object this controller picked
  112. + this.controllerToObjectMap.set(controller, pickedObject);
  113. + // highlight the object if we haven't already
  114. + if (this.objectToColorMap.get(pickedObject) === undefined) {
  115. + // save its color
  116. + this.objectToColorMap.set(pickedObject, pickedObject.material.emissive.getHex());
  117. + // set its emissive color to flashing red/yellow
  118. + pickedObject.material.emissive.setHex((time * 8) % 2 &gt; 1 ? 0xFF2000 : 0xFF0000);
  119. + }
  120. + } else {
  121. + line.scale.z = 5;
  122. + }
  123. + }
  124. + }
  125. }
  126. </pre>
  127. <p><a href="/docs/#api/ko/core/Raycaster"><code class="notranslate" translate="no">Raycaster</code></a>를 사용하기 전에는 그랬지만 이번에는 컨트롤러에서 ray를 가져옵니다.
  128. 이전 <code class="notranslate" translate="no">PickHelper</code>에서는 한 가지만 선택할 수 있었지만, 여기서는 한 손에 하나씩 최대 2개의 컨트롤러가 있습니다.
  129. 우리는 각 컨트롤러가 보고 있는 개체를 <code class="notranslate" translate="no">controllerToObjectMap</code>에 저장해야 합니다.
  130. 또한 원래 방사체의 색을 <code class="notranslate" translate="no">objectToColorMap</code>에 저장하여 선이 가리키는 모든 부분에 닿을 수 있을 만큼 길게 만듭니다.</p>
  131. <p>모든 프레임에서 이러한 설정들을 재설정하려면 몇 가지 코드를 추가해야 합니다.</p>
  132. <pre class="prettyprint showlinemods notranslate lang-js" translate="no">class ControllerPickHelper {
  133. ...
  134. + _reset() {
  135. + // restore the colors
  136. + this.objectToColorMap.forEach((color, object) =&gt; {
  137. + object.material.emissive.setHex(color);
  138. + });
  139. + this.objectToColorMap.clear();
  140. + this.controllerToObjectMap.clear();
  141. + }
  142. update(scene, time) {
  143. + this._reset();
  144. ...
  145. }
  146. </pre>
  147. <p>다음으로 우리는 사용자가 컨트롤러를 클릭했을 때 <code class="notranslate" translate="no">select</code> 이벤트를 내보내야 합니다.
  148. 이를위해 three.js의 <a href="/docs/#api/ko/core/EventDispatcher"><code class="notranslate" translate="no">EventDispatcher</code></a>를 확장한 후 컨트롤러에서 <code class="notranslate" translate="no">select</code> 이벤트를 확인하고
  149. 해당 컨트롤러가 가리키는 것이 있으면 해당 컨트롤러가 가리키는 <code class="notranslate" translate="no">select</code> 이벤트를 내보냅니다.</p>
  150. <pre class="prettyprint showlinemods notranslate lang-js" translate="no">-class ControllerPickHelper {
  151. +class ControllerPickHelper extends THREE.EventDispatcher {
  152. constructor(scene) {
  153. + super();
  154. this.raycaster = new THREE.Raycaster();
  155. this.objectToColorMap = new Map(); // object to save color and picked object
  156. this.controllerToObjectMap = new Map();
  157. this.tempMatrix = new THREE.Matrix4();
  158. const pointerGeometry = new THREE.BufferGeometry().setFromPoints([
  159. new THREE.Vector3(0, 0, 0),
  160. new THREE.Vector3(0, 0, -1),
  161. ]);
  162. this.controllers = [];
  163. for (let i = 0; i &lt; 2; ++i) {
  164. const controller = renderer.xr.getController(i);
  165. + controller.addEventListener('select', (event) =&gt; {
  166. + const controller = event.target;
  167. + const selectedObject = this.controllerToObjectMap.get(controller);
  168. + if (selectedObject) {
  169. + this.dispatchEvent({type: 'select', controller, selectedObject});
  170. + }
  171. + });
  172. scene.add(controller);
  173. const line = new THREE.Line(pointerGeometry);
  174. line.scale.z = 5;
  175. controller.add(line);
  176. this.controllers.push({controller, line});
  177. }
  178. }
  179. }
  180. </pre>
  181. <p>이제 render loop에서 <code class="notranslate" translate="no">update</code>만 호출하면 됩니다.</p>
  182. <pre class="prettyprint showlinemods notranslate lang-js" translate="no">function render(time) {
  183. ...
  184. + pickHelper.update(scene, time);
  185. renderer.render(scene, camera);
  186. }
  187. </pre>
  188. <p>그리고 컨트롤러가 있는 VR 장치가 있다고 가정하면 컨트롤러를 사용하여 선택할 수 있습니다.</p>
  189. <p></p><div translate="no" class="threejs_example_container notranslate">
  190. <div><iframe class="threejs_example notranslate" translate="no" style=" " src="/manual/examples/resources/editor.html?url=/manual/examples/webxr-point-to-select.html"></iframe></div>
  191. <a class="threejs_center" href="/manual/examples/webxr-point-to-select.html" target="_blank">새 탭에서 보기</a>
  192. </div>
  193. <p></p>
  194. <p>만약 우리가 물체를 움직일 수 있기를 원한다면 어떨까요?</p>
  195. <p>그것은 비교적 쉽습니다.
  196. 컨트롤러의 <code class="notranslate" translate="no">select</code> 수신기 코드를 함수 안으로 이동하여 두가지 이상의 용도로 그것을 사용할 수 있도록 합니다.</p>
  197. <pre class="prettyprint showlinemods notranslate lang-js" translate="no">class ControllerPickHelper extends THREE.EventDispatcher {
  198. constructor(scene) {
  199. super();
  200. ...
  201. this.controllers = [];
  202. + const selectListener = (event) =&gt; {
  203. + const controller = event.target;
  204. + const selectedObject = this.controllerToObjectMap.get(event.target);
  205. + if (selectedObject) {
  206. + this.dispatchEvent({type: 'select', controller, selectedObject});
  207. + }
  208. + };
  209. for (let i = 0; i &lt; 2; ++i) {
  210. const controller = renderer.xr.getController(i);
  211. - controller.addEventListener('select', (event) =&gt; {
  212. - const controller = event.target;
  213. - const selectedObject = this.controllerToObjectMap.get(event.target);
  214. - if (selectedObject) {
  215. - this.dispatchEvent({type: 'select', controller, selectedObject});
  216. - }
  217. - });
  218. + controller.addEventListener('select', selectListener);
  219. ...
  220. </pre>
  221. <p>이제 이것을 <code class="notranslate" translate="no">selectstart</code>와 <code class="notranslate" translate="no">select</code> 모두에 사용해 봅시다.</p>
  222. <pre class="prettyprint showlinemods notranslate lang-js" translate="no">class ControllerPickHelper extends THREE.EventDispatcher {
  223. constructor(scene) {
  224. super();
  225. ...
  226. this.controllers = [];
  227. const selectListener = (event) =&gt; {
  228. const controller = event.target;
  229. const selectedObject = this.controllerToObjectMap.get(event.target);
  230. if (selectedObject) {
  231. - this.dispatchEvent({type: 'select', controller, selectedObject});
  232. + this.dispatchEvent({type: event.type, controller, selectedObject});
  233. }
  234. };
  235. for (let i = 0; i &lt; 2; ++i) {
  236. const controller = renderer.xr.getController(i);
  237. controller.addEventListener('select', selectListener);
  238. controller.addEventListener('selectstart', selectListener);
  239. ...
  240. </pre>
  241. <p>사용자가 컨트롤러의 버튼을 놓을 때 three.js가 전송하는 <code class="notranslate" translate="no">selectend</code> 이벤트도 전달해 봅시다.</p>
  242. <pre class="prettyprint showlinemods notranslate lang-js" translate="no">class ControllerPickHelper extends THREE.EventDispatcher {
  243. constructor(scene) {
  244. super();
  245. ...
  246. this.controllers = [];
  247. const selectListener = (event) =&gt; {
  248. const controller = event.target;
  249. const selectedObject = this.controllerToObjectMap.get(event.target);
  250. if (selectedObject) {
  251. this.dispatchEvent({type: event.type, controller, selectedObject});
  252. }
  253. };
  254. + const endListener = (event) =&gt; {
  255. + const controller = event.target;
  256. + this.dispatchEvent({type: event.type, controller});
  257. + };
  258. for (let i = 0; i &lt; 2; ++i) {
  259. const controller = renderer.xr.getController(i);
  260. controller.addEventListener('select', selectListener);
  261. controller.addEventListener('selectstart', selectListener);
  262. + controller.addEventListener('selectend', endListener);
  263. ...
  264. </pre>
  265. <p>이제 코드를 변경하여 <code class="notranslate" translate="no">selectstart</code> 이벤트가 발생하면 선택한 개체를 scene에서 제거하고 컨트롤러의 하위 개체로 만듭니다.
  266. 즉, 컨트롤러와 함께 이동합니다. <code class="notranslate" translate="no">selectend</code>이벤트를 받게 되면 다시 scene에 넣을 것입니다.</p>
  267. <pre class="prettyprint showlinemods notranslate lang-js" translate="no">const pickHelper = new ControllerPickHelper(scene);
  268. -pickHelper.addEventListener('select', (event) =&gt; {
  269. - event.selectedObject.visible = false;
  270. - const partnerObject = meshToMeshMap.get(event.selectedObject);
  271. - partnerObject.visible = true;
  272. -});
  273. +const controllerToSelection = new Map();
  274. +pickHelper.addEventListener('selectstart', (event) =&gt; {
  275. + const {controller, selectedObject} = event;
  276. + const existingSelection = controllerToSelection.get(controller);
  277. + if (!existingSelection) {
  278. + controllerToSelection.set(controller, {
  279. + object: selectedObject,
  280. + parent: selectedObject.parent,
  281. + });
  282. + controller.attach(selectedObject);
  283. + }
  284. +});
  285. +
  286. +pickHelper.addEventListener('selectend', (event) =&gt; {
  287. + const {controller} = event;
  288. + const selection = controllerToSelection.get(controller);
  289. + if (selection) {
  290. + controllerToSelection.delete(controller);
  291. + selection.parent.attach(selection.object);
  292. + }
  293. +});
  294. </pre>
  295. <p>한 개체가 선택되면 해당 개체와 원래의 부모 개체가 저장됩니다.
  296. 사용자가 작업을 마치면 개체를 다시 돌려놓을 수 있습니다.</p>
  297. <p><a href="/docs/#api/ko/core/Object3D.attach"><code class="notranslate" translate="no">Object3D.attach</code></a>를 사용하여 선택한 개체를 재부모화 합니다.
  298. 이러한 기능을 통해 scene에서 객체의 방향과 위치를 변경하지 않고도 객체의 부모를 변경할 수 있습니다.</p>
  299. <p>그리고 우리는 이를 통해 6DOF컨트롤러로 물체를 이동하거나 3DOF 컨트롤러로 방향을 전환할 수도 있을 것입니다.</p>
  300. <p></p><div translate="no" class="threejs_example_container notranslate">
  301. <div><iframe class="threejs_example notranslate" translate="no" style=" " src="/manual/examples/resources/editor.html?url=/manual/examples/webxr-point-to-select-w-move.html"></iframe></div>
  302. <a class="threejs_center" href="/manual/examples/webxr-point-to-select-w-move.html" target="_blank">새 탭에서 보기</a>
  303. </div>
  304. <p></p>
  305. <p>솔직하게 말해서 나는 이 <code class="notranslate" translate="no">ControllerPickHelper</code>가 코드를 구성하는 가장 좋은 방법이라고 확신할 수 없습니다.
  306. 하지만 이것은 three.js의 VR에서 작동하는 간단한 작업들의 다양한 부분을 보여주는데 유용합니다.</p>
  307. </div>
  308. </div>
  309. </div>
  310. <script src="../resources/prettify.js"></script>
  311. <script src="../resources/lesson.js"></script>
  312. </body></html>