笑顔を届けるーVRとARの未来
ARとVRがゲーム分野で徐々に、しかし確実に普及するにつれ、企業はプレイヤーの頭がどこに向いているのかと表情を知ることの重要性が増してきてる：ソニーとMetaは、ARとVR装置をつけているときの顔の表情を追跡する技術の特許を申請した。
まず、Metaから説明しよう。同社が特許を申請しているのは、「カメラや複雑な画像データ処理」を必要としない表情追跡の方法である。その代わりに、Meta社の技術は、照明器と光子検出器を使用します。
その名の通り、ヘッドセットのイルミネーターがユーザーの顔を照らし、フォトンディテクターがその光の反射を拾い上げる。この2つのデバイスからの情報がプロセッサに送られ、プロセッサは "表情を再構築する "アルゴリズムを用いてユーザーの表情を判断するのです。
ARやVRのヘッドセットに内向きカメラシステムを搭載する必要性をなくすとともに、Meta'sはその技術が "低コストで顔認識システムを提供する "と述べています。
一方、ソニーは、気圧センサーを使った人工現実ゲームにおいて、ユーザーの顔の動きを追跡することに取り組んでいます。この技術では、ヘッドセットに取り付けられたセンサーを使用して、目の動き、呼吸パターン、まばたき、会話など、ユーザーの顔の特徴的な動きから「気圧の変化」を捉えます。これらの変動は、プロセッサによって分析され、「モーション・メトリクス」、つまりユーザーの顔の表情を検出・評価し、「ユーザー・インタラクションの微調整」に利用されます。
ソニーは、このようなトラッキングは、ARやVRゲームでユーザーのエンゲージメント指標を監視し、表示されているコンテンツに対する「ユーザーの興味や不足を測る」のに役立つと述べています。あくびをしているところを見られないようにしましょう。
"様々なアプリケーションのコンテンツに対するユーザーの関心度を測ることは、開発者やコンテンツプロバイダーが、ユーザーにとって有用かつ興味深いコンテンツを提供するのに役立つ "と、ソニーは申請書で述べています。
企業はユーザーの顔や表情を追跡する技術に非常に興味を持っているようです。例えば、アイコンタクトのシミュレーションでビデオ通話の気まずさを軽減したり、VRヘッドセットのレンダリングを容易にするためです。
しかし、Metaとソニーの特許出願に共通しているのは、カメラではなくセンサーを使用して顔の動きを追跡していることです。Jake Maymar, VP of innovation at The Glimpse Group はカメラを使わないということは、企業にとってもコスト面のパフォーマンスを生み出すことにもなります。カメラによる表情追跡の特許はすでに数多く存在するため、センサーはこれらの企業が独自の表情追跡技術を手に入れるための回避策になる、と彼は言います。
「理にかなっている。彼らは、"カメラを使わずに顔を捉えるにはどうしたらいいか "という回避策を見つけようとしているだけなのです」。とMaymarは言う。「カメラ関連の特許は取得されて、研究されていますが、高価であり、プロセッサを大量に消費します。また、プライバシーやセキュリティの問題もあります」。
ソニーとMetaは、拡張現実ゲームの分野では新参者ではありません。ソニーはPlayStationで長年コンソールゲームをリードしており、PS VRという独自のヘッドセットを提供している。Metaはもちろん、メタバース目標をサポートするために、Quest VRと複合現実ヘッドセットのラインを持っており、Among UsやBeat Saberを含む少数のゲームに対応しています。
フェイシャル・トラッキングそのものについては、ソニーとMetaが興味を持つ可能性がある理由がいくつかあります。両社は提出書類の中で、ゲーム内でユーザーの表情を見ることで読み取れる独自のエンゲージメント指標、例えば特定のコンテンツに対するユーザーの感情的な反応を確認できることに触れています。しかし、もう一つの潜在的な用途は、これらの表情がVR体験をどのように向上させるかということだとMaymarは述べています。
Maymarは、友人とゲーム内のVRクエストに行くことを例に挙げて：「例えば、怖い廊下にいるとき、友達の顔が見え、友達にも自分の顔が見えるとします。ジェスチャーだけでなく、実際の顔を見て、その表情、つまり興奮を知ることができる。まるで自分がそこにいるような気がして、絆が深まるような気がするのです。"
現時点では、拡張現実体験はゲーム分野のごく一部に過ぎないとMaymarは言う。その理由のひとつは、人とのつながりや感情を排除した、孤独な体験になりかねないからです。しかし、ゲームプレイに表情などの感情を伝える方法を加えることは、ユーザーの関心を高める鍵になるかもしれません。
しかし、それが実現するまでは、"XRがゲームに大きな影響を与えることはないだろう "とMaymarは言います。
この記事が気に入ったらサポートをしてみませんか？