OculusQuestハンドトラッキングテクノロジーの仕組み

Oculus Quest（元のモデルと2番目のモデルの両方）には、ハードウェアが世に出てからずっと後に追加された機能の興味深い歴史があります。 これらの中で最も有名なのは、クエストを効果的にOculusRiftに変えるOculusLinkです。 この機能は非常に成功したため、OculusはQuest以外のすべてのヘッドセットを廃止することにしました。

ハンドトラッキングは、Oculus Linkが行ったようなスプラッシュにはなりませんでしたが、それでも多くの可能性を秘めた素晴らしい機能です。 手動追跡を使用すると、コントローラーはまったく必要ありません。 あなた自身の手がVRの世界にデジタル化されます！

クエストをお持ちの場合、またはクエストの購入を検討している場合は、ハンドトラッキングがどのように機能し、VR体験に何をもたらすことができるかを知る価値があります。

クエストが世界を追跡する方法

Oculus Questは、モーショントラッキングに向けた革新的なアプローチを使用しています。これは、一般に「裏返し」トラッキングと呼ばれ、これまでのモーショントラッキングの仕組みとは大きく異なります。

2010年代半ばに最初の次世代ヘッドセットがリリースされたとき、それらは1つ以上の外部追跡カメラを利用していました。 ヘッドセットの特別なモーショントラッキングライトは、ヘッドセットがそれに対してどこにあるかをカメラに正確に伝えました。 いくつかの巧妙な計算により、そのデータは3D空間で非常に正確なモーショントラッキングに変換できます。 これが、プレミアムVRヘッドセットが6DoFとしても知られる「6自由度」を提供する方法です。

Questは、カメラセンサーをヘッドセット自体に移動します。この場合、カメラセンサーをデバイスの戦略的な場所に配置します。 他のヘッドセットは、精度を向上させるためにさらに多くのカメラを使用する場合があります。 これらの4台のカメラにより、クエストはあなたの周りの現実の世界を見て、その空間内でのあなたの位置を判断できます。

それが、クエストが自己完結型でポータブルであることを可能にするものです。 そもそもOculusでのハンドトラッキングを可能にする機能でもあります。

標準のOculusタッチコントローラー

Oculusのハンドトラッキングが非常に印象的である理由を理解するには、OculusQuestに付属しているかなりありふれた物理コントローラーから始める必要があります。 それぞれが内部センサーと特別なモーショントラッキングマーカーによって完全にモーショントラッキングされ、コントローラーがヘッドセットに対してどこにあるかをクエストの車載カメラに知らせます。

VRでタッチコントローラーを持っているとき、それらは驚くほど正確に追跡されます。 コントローラーのグリップボタンとトリガーボタンを使用して、VRソフトウェアはアイテムをつかんで操作するという説得力のある体験を作り出すことができます。 これは、Half-LifeAlyxやTheClimbなどのゲームで大きな効果を発揮するために使用されます。このゲームでは、VRの世界でアイテムをつかむことがゲームプレイの中心的な部分です。

タッチコントローラーは、「リニアアクチュエーター」と呼ばれるデバイスのおかげで触覚フィードバックも提供します。これにより、物にぶつかったり、振動したり、その他のタッチ感覚を物理的に感じることができます。 サムスティックとボタンは、実際の空間で物理的に動き回ることができないときに、VR空間を動き回るおなじみの方法も提供します。

ハンドトラッキングと比較した場合のこれの主な欠点は、手用のフックがあることです。 仮想の手で簡単なピンチ動作を実行できますが、それはその範囲です。 ゲームがコントローラーを中心に設計されている場合、それは大きな制限のようには感じられませんが、ハンドトラッキングはVRの新しい可能性のスペクトルを開きます。

Oculusハンドトラッキングの機能

ハンドトラッキングを有効にすると、VRの世界で実際の手の正確な表現が表示されます。 指や手首の各動きは、仮想ドッペルゲンガーに反映されます。

ハンドトラッキングは、Questのベータ機能ではなくなりました。 現在、オペレーティングシステムと多くのファーストパーティのQuestアプリケーションに統合されています。 ここでの最初の主な利点は、クエストをすぐに実行してVRで映画を見たり、アプリストアを閲覧したりする場合に、タッチコントローラーをストラップで固定する必要がないことです。 手だけでシステムメニューにアクセスし、簡単にナビゲートできます。

ハンドトラッキングがQuestの公式機能になったので、サードパーティのアプリ開発者はそれを自分のアプリに追加できます。 Oculusのハンドトラッキング機能をうまく利用するアプリはすでにたくさんありますが、開発者は、直接のハンドトラッキングがVR体験を変えることができるもっとエキサイティングな方法を見つけると確信しています。

Oculusハンドトラッキングのしくみ

手作業による追跡の結果は非常に素晴らしいですが、実際にはどのように機能しますか？ 明らかに、Oculusは独自のソリューションの正確な詳細を公開するつもりはありませんが、関連するテクノロジーと原則は知っています。

まず、オンボードカメラは手動追跡を機能させるために不可欠です。 立体的な深度情報だけでなく、マシンビジョンで処理するための視覚データも提供します。 マシンビジョンとは何ですか？ これは人工知能の分野であり、具体的には機械学習として知られる分野です。 これは、携帯電話のカメラアプリで写真の顔をすばやく識別できるのと同じテクノロジーです。

基本的に、ソフトウェアは、カメラによって提供される画像データの何が手であり、何が手ではないかを学習する必要があります。 これはおそらく、部屋の他のすべてのものと区別するための高速で効果的な方法を確実に理解できるようになるまで、さまざまな環境でソフトウェアに何千もの手を見せることによって行われました。

ソフトウェアがあなたの手の正確なリアルタイム仮想モデルを作成できるようになると、アプリ開発者はそれらを考えられるあらゆることに使用できます。 VRでオブジェクトを正確に操作できるようになりました！

試してみる価値のある手作業による体験

Oculus Questを所有している場合は、特定のアプリを購入しなくても、Oculusハンドトラッキング機能を試すことができます。 上記のように、メインのQuest環境といくつかのファーストパーティアプリで動作します。 サードパーティのエクスペリエンスに関しては、強調する価値のあるものがいくつかあります。

The Lineは4.99ドルのナラティブ体験であり、ハンドトラッキングの完璧な技術デモとしても機能します。 時計仕掛けと線路を走るスケールモデルの町の物語です。

私たちのヒーローペドロはローザに恋をしていますが、彼は運命から逃れることはできません。 ある日何か新しいことが起こるまで。 手を使ってノブを回したり、レバーを引いたり、できることすべてをいじったりすることで、スケールモデルの世界と対話します。 これは直線的で短い体験ですが、約15分で非常に面白い方法でハンドトラッキングを披露することができます。

Waltz of the Wizard（$ 9.99）は、このテクノロジーのもう1つの優れたショーケースです。 手を使って呪文を唱えたり、周囲のVR世界のほぼすべてのものとやり取りしたりできます。 手から照明のボルトを撃つことができる魔法使いになるというファンタジーを生きたいと思ったことがあるなら、これはあなたのためのゲームです！

クエストでのハンドトラッキングについてどう思いますか？ 試しましたか？ どのゲームをお勧めしますか？ コメントであなたの洞察を共有してください。