◇はじめに

Meta Quest2でハンドトラッキングを実装する方法をご紹介致します。

ハンドトラッキングとは、コントローラーを使わずに自分の手を使ってVR空間での操作が可能になる機能です。

｜開発環境

Unity：2022.3.1f1

XR Plugin Management：4.3.3

Oculus XR Plugin：4.0.0

Oculus Integration：53.1

◇ハンドトラッキングの設定（公式）

データ使用の免責事項: ジェスチャーコントロールのサポートを有効にすると、アプリから特定のユーザーデータ(ユーザーの手の推定サイズや手のポーズデータなど)にアクセスできます。このデータは、アプリ内でジェスチャーコントロールを有効にするためにのみ使用でき、他の目的での使用は明示的に禁止されています。

 

ジェスチャーコントロール機能を使うと、Meta Questデバイスの入力メソッドとして手を使用できます。手や指の関節の動きを完全にトラッキングすることで、新しいプレゼンス感覚がもたらされ、ソーシャルエンゲージメントが高まり、より自然なインタラクションが実現します。つまむ、放す、つまんだままにするなど、単純な手のジェスチャーにより、手でオブジェクトの操作を実行することができます。

 

ジェスチャーコントロール機能を使えば、手とコントローラーのどちらでも操作できます。手を使用する場合、標準のコントローラーカーソルのように動作するレーザーカーソルポインターを手のポーズで動かします。カーソルポインターを使用して、アプリレベルのイベントロジックのハイライト、選択、クリック、書き込みが行えます。

 

ジェスチャーコントロールはTouchコントローラーを補完するものであり、高い精度が求められるゲームやクリエイティブツールなど、あらゆるシナリオでコントローラーに置き換わるものではありません。手のサポートをオプトインする場合、アプリはOculusストアで承認されるよう、ジェスチャーコントロール特有の付加的な技術要件を満たす必要があります。アプリをOculusストアに提出するには、アプリはコントローラーとジェスチャーコントロールを一緒にサポートしなければなりません。アプリをOculusストアに提出するには、アプリはコントローラーとジェスチャーコントロールを一緒にサポートしなければなりません。

 

◇事前準備

以下の準備を整えておきます。

１．Meta Quest2本体の「設定 > デバイス > ジェスチャーコントロールとコントローラー」　の「ジェスチャーコントロール」をオンにしてハンドトラッキングを有効にします。

　※Meta Questアプリから開発者モードに設定しておく必要があります。

　※「手とコントローラーの自動切り替え」もオンにしておくと、手とコントローラーが自動で切り替わります。

 

２．Unityでプロジェクトを作成し、「File > Build Settings」でAndroidにSwitch Platformし、Player Settingsなどビルドに必要な環境を整えておきます。

 

３．XR Plug-in Managementを有効にします。

　　Androoidのマークを選択し、Oculusにチェックを入れます。

　　Oculus Linkを使用する場合はもStandaloneの方のOculusにもチェックを入れます（MacPCの場合はStandaloneのOculusがありません）

４．WebブラウザでUnityのAssetStoreにアクセスし、Oculus Integrationをダウンロードします。

　　AssetStoreでダウンロードしてMy Assetに追加すると、Unity エディターのPackage Managerからダウンロードが可能になります。

 

５．Unityエディタで「Window > Package Manager」のMy AssetsからOculus Integrationをインポートします。

　　PackagesをMyAssetにして探すと見つかります。

　　途中で「Script Updating Consent」ダイアログがでたら

「Yes,for these and other files that might be found later」をクリックします。

「Help improve the Oculus SDKs」ダイアログが出たら

「Send usage statistics」をクリックします。

「Interaction SDK」ダイアログが出たら「ShowAssts（Recommended）」をクリックします。

次に→「Clean Up」をクリックします。

「Update Spatializer Pulugins」ダイアログが出たら「Upgrade」」をクリックします。

「Restart Unity」ダイアログが出たら「Restart」をクリックします。

「Update Oculus Utilities Plugin」ダイアログが出たら「Yes」をクリックします。

　再度「Restart Unity」ダイアログが出たら「Restart」をクリックします。

 

◇ハンドトラッキングの有効化方法

いずれかの方法で行います。

｜4.1.OculusProjectConfigで有効化する方法

ProjectのAssets＞Oculusにある「OculusProjectConfig」を選択し、Inspectorの「Hand Tracking Support」を、「Controllers Only」から「Controllers And Hands」または「Hands Only」に変更します。

※「Controllers And Hands」の場合は、Oculus Quest2本体の

　「手とコントローラーの自動切り替え」をオンにしておく必要があります。

｜4.2.OVRCameraRigのOVRManagerで有効化する方法

ProjectのAssets＞Oculus＞VR＞Prefabsにある「OVRCameraRig」を選択し、Inspectorの「OVR Manager」コンポーネントにある「Hand Tracking Support」を、「Controllers Only」から「Controllers And Hands」または「Hands Only」に変更します。

※「Controllers And Hands」の場合は、Oculus Quest2本体の

　「手とコントローラーの自動切り替え」をオンにしておく必要があります。

◇ハンドトラッキング用の手の配置手順

ProjectのAssets＞Oculus＞VR＞Prefabsにある「OVRCameraRig」をHierarchyに配置します。

Hierarchyの「Main Camera」を削除します。

※OVRCameraRigにあるCenterEyeAnchorがMainCameraの代わりになります。

Hierarchyの「OVRCameraRig」を展開します。

ProjectのAssets＞Oculus＞VR＞Prefabsにある「OVRHandPrefab」をHierarchyの「LeftHandAnchor」と「RightHandAnchor」の子になるように配置します。

「RightHandAnchor」に配置した「OVRHandPrefab」を選択し、Inspectorの以下3か所を「Hand Left」から「Hand Right」に変更します。

１．「OVR Hand」コンポーネントにある「Hand Type」

２．「OVR Skeleton」コンポーネントにある「Skeleton Type」

３．「OVR Mesh」コンポーネントにある「Hand Mesh」

◇おまけ

Sceneを保存し、ビルドしてOculus Quest2にapkファイルを送り、動作確認しましょう。

手を前方に向けた時に手が表示されていれば成功です。

※Oculus Linkを使うと、ビルドせずに動作確認ができ捗ります。(Windows限定)

　詳しくは下記の記事を参照ください。

「Meta Questで、PC用VRソフトを体験する方法！～Quest Linkを触ってみよう！（Quest Linkの設定編）」

 

■参考Webサイト

公式：Hand Tracking in Unity | Oculus Developers

事前準備系：Unity + Oculus Quest 2 開発メモ – フレームシンセシス (framesynthesis.jp)

 

◇最後に

ハンドトラッキングといっても、予め用意されているPrefabの設定と配置をするだけで簡単に動作するようになります。

ぜひご自分のプロジェクトに組み込んで、オリジナリティある作品にチャレンジしてみてはいかがでしょうか。

 

---

---

◇アカデミーからのお知らせ

ARエキスパートコース

VRエキスパートコース

現在VRアカデミーではVisionProを始めとするゴーグル型のARデバイスを活用したARアプリ開発の方法をより深く学べる授業を取り組んでいます。

 

またゴーグルだけに囚われず、WebAR・スマホARそれぞれの特徴と実装方法について学習し、目的に合わせた適切なデバイス選定と実際に開発が出来るエンジニアを目指すことが出来るカリキュラムをご案内しています。より詳しくスキルを学びたい方は是非受講をご検討してみてはいかがでしょうか。

 

 

さらにARだけではなくVRエキスパートコースも申し込み受付中です。

 

VRエキスパートはARと違い３６０度世界に没入することを目的としたコンテンツです。そこでVRエキスパートではより没入感を得られるようなCGの演出技術やシナリオマネジメント。そしてメタバースに代表されるマルチ通信処理など。様々な技術を体系的に学習することが可能です。

是非合わせて検討してみていただければ幸いです。

 

 

★VRプロフェッショナルアカデミーオンライン個別相談会＆オープンキャンパス実施中

VRアカデミーについてより詳しく知りたい方は下記相談会・オープンキャンパスの参加がオススメです。

どんなカリキュラムなのか。卒業生のVR・AR作品を体験したい方は是非お気軽にお申し込みください。

◎オンライン個別相談会

日　　時：平日開催 10:30〜21:00　
場　　所：オンライン or 対面による面談選択可
説明時間：６０分程度
申込み先：個別相談会の詳しくは→ https://vracademy.jp/freesession/

◎オープンキャンパス

日　　時：毎週土曜日開催 11:00〜18:00　
場　　所：XR施設『NEUU』（新宿駅西口から徒歩3分）
　　　　※WEB申込み完了後、詳細はメールにてご案内します
説明時間：６０～９０分程度
申込み先：オープンキャンパスの詳しくは→ https://vracademy.jp/opencampus/