2019-06-05 10:00:00

みなさんは Virtual Reality（仮想現実）を体験したことがありますか？

最近、Oculus Rift やHTC Vive, PlayStation VRなど精度の高いVR(Virtual Reality)ハードウェアがリリースされ、今この業界は大変な盛り上がりを見せています。VRと言われると最新技術というイメージがありますが、意外にもその歴史は長く、1930年代にアメリカのエドウィン・リンク氏が開発した「Link Trainer」がその前身技術と言われています。

VRは最近開発された最新技術ではなく戦前から開発されてきた意外にも歴史のある技術だったのです。

今回は飛躍を遂げたVR技術の中でも、認知科学の知見を応用した「クロスモーダル現象」について解説します。

◆ここまできたVRの技術

Oculus Riftを開発したOculus社創業者のパーマー・ラッキーはこう述べています。

「人々が40年前から考えていたアイデアに、ようやくテクノロジーが追いついた。」

VRは視覚、聴覚に訴えかけることによって没入感を実現しています。

そして最新技術では、ここに触覚が加わります。マイクロソフト社は、VR空間内のオブジェクトを触れた際に、その触覚を伝えるハンドヘルド型のコントローラーの試作機を開発しました。

発表されたのは2つ。

Normal TouchとTexture Touchです。Oculus Riftと光学センサーの組み合わせによって、作られています。

「Normal Touch」は、VR内でユーザーがオブジェクトに触れると、その形状に応じてデバイスの台座の傾きがリアルタイムで変化し、 指先にその物体に触れた感覚だけでなく物体の形状も伝えます。

また「Texture Touch」は、指を乗せる台座に数mm四方の4×4のピンがあり、各ピンが個別に上下運動することで、 NormalTouchよりも細かな凹凸感を指先に伝えます。

今後より現実世界に近い様々なフィードバックの実現により、VRへの没入感はより次元の高いものとなっていくでしょう。

◆クロスモーダル現象とは？

みなさんは　クロスモーダル現象という言葉を聞いたことがあるでしょうか。

クロスモーダル現象とは『仮想体験によって実際に起きていないことを脳が錯覚し、それが起きたと感じてしまう現象』のことです。五感の中のとある感覚が刺激される子tで、脳が情報を補完。実際には起きていないことも、脳の情報補完によって「起きた」と錯覚してしまうのです。

クロスモーダル現象はVR 以外でも日常的に起きている現象です。

例えば風鈴の音を聞くだけで実際の気温より涼しく感じたり、大きなものを食べるとそのカロリー以上に満腹感を感じたりするのはこのクロスモーダル現象によるものです。

クロスモーダル現象は、現象を体感する当人にとっては全く無意識に起きるものです。しかし、その当人の意思決定には非常に大きな意味合いを持ちます。

そこでこのクロスモーダル現象を効果的にVRに取り込み、より高い次元の没入感を再現しようとする研究が行われています。

今や視覚、聴覚に加えて触覚にまで訴えかけるVR。そこにクロスモーダル現象をコントロールする技術が加わったら、もはや現実世界とVRの世界の区別がつかなくなってしまうかもしれませんね。

◆脳が騙される？ クロスモーダル現象の仕組み

VR技術の発展により、今日では様々な認知の実験が行われています。

例えば実際に行なわれた実験では、被験者にヘッドマウントディスプレイを装着させ、マグロを食べてもらいます。被験者はVRによってトロやサーモンを食べているように見えています。

この時被験者は実際にはマグロを食べているにも関わらず、トロに見えている時はトロの味に、サーモンを食べている時はサーモンの味に感じてしまうそうです。

そう感じる理由に感覚間の優先順位の存在があります。

この実験では、視覚から入ってくるトロやサーモンの情報と実際に口の中に入ったマグロの赤身の味覚情報が脳内で統合されるとき、味覚情報よりも視覚情報が優位に働く仕組みを利用しています。

実際にはマグロを食べたにも関わらず、脳に記憶されているトロやサーモンの味に関する情報が優先されることで、自分が食べたのはマグロではなくトロやサーモンであったと判断されてしまうのです。

この効果のことを「クロスモダリティ効果」と言います。