細かい作業を行えるデスクトップ画面と、直観的に操作できるＶＲーーこれにパススルーを加えることで、簡易なＭＲによる造形を体験します。
関連
- ◯
- 文化＆技術：拡張された環境（ＸＲ）と創造
- ◯
- 文化＆技術：ＸＲの普及とグラス型ＨＭＤ
背景
- ◯
- ３Ｄによる造形は、現実より多彩になる
３Ｄ技術による造形は、現実の制約を受けないので、多彩な表現ができます。
コストがほぼかからないのに（エネルギーをほぼ必要とせず、大量のモノを生成〜複製〜廃棄できる）、考えられるあらゆる操作を実現できるからです（拡大／縮小／変形、ポリゴンによる点・辺・面レベルでの編集、物理法則を無視した結合・分離、……）。
問題
- ◯
- デスクトップ画面越しの造形は直観的ではない
とはいえ現状の３Ｄ制作は、ほぼデスクトップ画面越しに行われるので、操作は直観的ではありません。またデスクトップ画面で３Ｄのモノやキャラを作ると、現実の見え方とは印象が違ってきますーー２次元の画面には、視差がはたらかないためです。
- ◯
- ＶＲによる造形はおおざっぱになりがち
いっぽうＶＲは立体視なので、その見え方は現実とほぼ同じです。またモノやキャラを現実と同じようにあつかえる要素もあるため、造形もより直観的になりますーー
ただ、いまのＶＲ空間には接触を再現する機能がないため、コントローラやハンドトラキングによる操作を安定させづらい、という問題があります。またＶＲコントローラは制御がおおざっぱになりがちで、ハンド／フィンガートラッキングも、現実の手や指の精緻な動作におよびませんーー細かい操作や数値・文字の入力は難しくなります。
じっさい、ＵＩをデスクトップ画面からＶＲに置き換える試みは、どれもうまくいっていないようにみえますーーこれは、［１］あらたな学習コストがかかるうえ、なにより［２］操作を安定させづらい、という根本の問題が解消されないからではないでしょうか。
対応
- ◯
- ＭＲにより、直観的で詳細・精緻な造形ができる
しかしＭＲなら、デスクトップ画面での操作（キーボード＆マウス）とＭＲ空間での操作（コントローラ／ハンドトラキング）を併用できるので、これらの問題を解決することができます。
ＭＲによる造形は、通常はデスクトップ画面からキーボード＆マウスを使い、必要に応じて、ＭＲによる立体視とＶＲコントローラで対象を確認〜操作する、という感じになるでしょうかーーこうすることで、デスクトップの詳細・精緻な操作を継続しつつ、直観的な操作を３Ｄ制作に取り入れることができるようになります。
たとえばキャラメイクなら、パラメータの操作はキーボード＆マウスで行い、モーフの形状確認は立体視で行う。アニメーション作成なら、タイムラインの操作はキーボード＆マウスで行い、ボージングはＶＲコントローラやハンドトラッキングで操作する、など。
手段：一般
- ◯
- ＭＲによる造形を実現する手段には、３つのパターンがある
ＭＲによる造形の実現には、まずアプリ側が対応することが前提になります（アプリ側で、オブジェクトをＸＲコントローラで操作できるようにする必要がある）。
その前提で、現状〜将来のＭＲ造形の候補には、次のものがあるでしょうか：
- ・
- パターン＃１：ＭＲデバイスだけを使うーーＭＲグラスやＭＲゴーグルなどを使う、ほんらいのやり方です
- ・
- パターン＃２：ＶＲデバイス＋アプリ側の仮想デスクトップを使うーーＶＲゴーグルを使いますが、アプリ側が、仮想デスクトップをＶＲ空間に表示するやり方です（キーボード操作にはブラインドタッチが必要になります）
- ・
- パターン＃３：ＶＲデバイス＋ＸＲランタイムの仮想デスクトップを使うーーＶＲデバイスを使いますが、ＸＲランタイムが、仮想デスクトップをＶＲ空間に表示するやり方です（キーボード操作にはブラインドタッチが必要になります）
手段：個別：パターン＃３
以下、上記のパターン＃３（ＸＲランタイムが、仮想デスクトップをＶＲ空間に表示するやり方）で、モノやキャラの造形を試したものです：［※１］
- ※１
- 仮想デスクトップの描画は、ＶＲ映像の描画より優先度を高くするしかないので、ＶＲ上のモノやキャラは、どうしても仮想デスクトップからすこし離れた位置に置くことになります（仮想デスクトップの手前に置くと、モノやキャラはみえなくなる）ーーパターン＃３にはこの制約があるので、操作が直観的になるとはいえ、やりづらい面があります。
- ◯
- 簡易なＭＲによる造形：Blender, Blender (Freebird XR) , SteamVR, ALVR/ALXR
- ◯
- 簡易なＭＲによるキャラメイクとアニメーション作成：VaM, VaM (Timeline) , SteamVR, ALVR/ALXR
- ◯
- 漫画制作を効率化する 〜 ３Ｄによるキャラメイクと、オールインワンの制作過程（仮）：Emotion Creators