技術ブログ

Top  >   技術ブログ  >   【全３回】Apple Vision ProのようなARアプリをMeta Questで開発してみよう Part1【2024-05-15　更新】

【全３回】Apple Vision ProのようなARアプリをMeta Questで開発してみよう Part1【2024-05-15　更新】

2023/06/09

◆はじめに

こんにちは！VRアカデミーで講師をしているツキダです。

皆さんは2023年のWWDC23(日本時間6月６日)のニュースをご覧になりましたか？

ついに発表されましたね。Appleから発売する待望のARデバイスとして「Apple Vision Pro」が公開されました。

 

ビデオシースルー型のデバイスで、ARもVRも両方体験出来る本当のMR(Mixed Reality)デバイスとして期待度がとても高まります。

 

実際に現地で体験された方の記事を読む限り、体験満足度は非常に高く、
デバイスが発売されたらたくさんの「Apple Vision Pro」向けのアプリがリリースされることは間違いないと感じています！

 

「Apple Vision Pro」の発売日は来年2024年度の予定です。米国では初旬に発売を予定しているそうですがその他の国や地域はもう少し後になりそうです。

 

ということは米国在住の方と比べて実機を用いたARアプリ開発のスタートダッシュが遅れてしまうことが既に確定しています。

 

そしてこの手の業界はスピードが第一！　先行してリリースをすることは、アプリがまだ少ない状況下の中で、多くの人に体験をしていただけることは間違いありません。

 

そしてAppleの参入によりこれからますますVR・AR業界のソフト開発の需要は高まっていくことが予想されます。

 

 

 

そうなるとこのビッグウェーブに乗り遅れないためには「いち早くゴーグル型のデバイスでARアプリ開発を経験したい！」「ハンドトラッキングを利用したARアプリの開発を学びたい！」
そんな気持ちはないでしょうか？

 

実は既にあるんです！

 

Meta社が開発するVRデバイスであるMeta Questシリーズ（MetaQuestPro、MetaQuest2）を利用することで、ビデオシースルーでハンドトラッキングを利用する。
そんなARアプリ開発を先行して学習することが出来ます。

 

本記事では「Apple Vision Pro」でも利用できる「Unity」を用いたARアプリ開発の基礎技術を学習することを目的として、

全３回に分けてARアプリ開発の概論から具体的な実装方法までを解説します！

 

 

◆Apple Vision Pro の特徴をおさらい

さて、改めてApple Vision Proの代表的な機能の特徴を見ていきます。

 

しかし普通の内容ではつまらないので少しだけ開発者目線で紹介を行いたいと思います。

 

 

■特徴１：２つのディスプレイに2300万ピクセルの解像度

公式サイトでは「2つのディスプレイに2,300万ものピクセルを詰め込んだ超高解像度のディスプレイシステム」と記載されています。

しかしこれは実際どのくらいの解像度なのでしょうか？

 

ピクセル解像度はその内容のとおり、画面サイズに埋め込まれた画素ドットの数を示しています。例えばフルHD（２K）動画を例にすると、

1920×1080＝207万3600画素　と計算出来ます。

 

これが4Kになるとどうでしょうか？　４Kの動画解像度（3840×2160）であり、計算すると829万4400画素。
そして８Kだと7680×4320となり3317万7600画素と4倍ずつ解像度が上がります。

 

上記計算をもとにすると、Vision Proの解像度は実質４K以上、８K未満であることが分かります。

つまりは片目で割ったとしても1150万画素があり、４Kで撮影した動画などをそのままの画質で再生出来る性能があることが分かります。

 

※余談ですが、一般論として人の目は４K以上の解像度の違いを見分けることが難しいと言われています。しかしこれは見る距離によって変化し、
ゴーグル型のデバイスの場合、非常に近距離から更にレンズを使って拡大して映像を見ることになるので、本物に非常に近い映像で見るためには８K以上、更には16Kクラスの解像度が必要だなんて言われていたりします。（つまり今後の技術進化でもっと綺麗な映像が見れるデバイスが登場する可能性があります）

 

 

■特徴２：視線（Gaze）とハンドトラッキングを用いた入力操作

Vision Proにはコントローラがありません。その代わり視線とハンドトラッキングを使った入力操作を実現しています。

 

具体的には視線で対象物を中心に捉え（これをGazeと呼びます）、その状態で親指と人差し指をくっつける、まるで摘むような動作を行うことで入力操作を実現しているようです。

 

※VisionProにはアイトラッキング機能が搭載されていますが、Gazeでは首を動かしての操作が基本となります。（もしかしたらVisionProではアイトラッキングも組み合わせた操作性になっているかもしれません）現時点では虹彩認証でのログイン機能を提供することが判明しています。

 

実はこの視線とハンドトラッキングを組み合わせた入力操作は今回が初めてのUXデザインではありません。

 

実は2016年にマイクロソフトより発売された初代HoloLensの入力操作が視線と指を摘む動作を組み合わせた入力操作を実現していました。

 

実は現在リリースされている多くのデバイスはハンドトラッキング精度の進化により、指の指し示す方向だけで対象を選んで操作が出来るのですが、

 

Apple Vision Proではそうではありません。特に当時のHoloLensには無かったアイトラッキングやAI技術の進化によるハンドトラッキング精度の向上は目覚ましく、既にXRコンテンツを開発している企業にとっては今ここでGaze操作を組み合わせるメリットについて様々な場所で再議論されているのかもしれません。

 

 

■特徴３：ダイヤル操作によるVRモード・ARモードの自動切り替え機能

もう一つの大きな特徴としてデバイス上にあるダイヤル（デジタルクラウン）を回すことでシームレスにVRとAR空間を切り替える機能を実現しています。

 

この機能があることで、ライトでコンテンツを体験する場合はARモードに

没入して体験したい場合はVRにシームレスで切替えることで

VRとARそれぞれにあった利便性のメリットとデメリットの問題を解決することが出来ています。

 

そして実はこの機能もMeta社のVRゴーグルに実装されています。こちらはホーム画面上でVRとARモードを切替える機能を実現しています。

 

 

■Apple Vision Proの特徴のまとめ

Apple Vision Proにはこの機能以外にもEyeSightモードや３Dカメラ機能。アバター（ペルソナ）作成機能といった様々なユニーク機能が提供されていますが、

 

それらの多くの機能は既に他メーカーから提供されている機能でもあります。

 

Appleは既出の機能や特徴を更により良いデザインにアップデートすることに対して長けた会社であると考えますが、Apple Vision Proの機能を使った開発を学びたい場合は既存のデバイスを用いることで十分に学習することが出来る環境が既に整っていることを示していると考えます。

 

続いて既存のデバイスの特徴。特にAR機能について掘り下げてみたいと思います。

 

 

 

◆Meta Quest ProとMeta Quest 2で体験出来るAR機能（パススルー）について

Meta Quest ProとはMeta社が2022年10月26日に発売したVRゴーグルで、

 

価格は2023年6月現在159,500円で購入が出来るデバイスです。

 

Meta Quest ProはこれまでのVRゴーグルと同じくコントローラが付属していますが、実はハンドトラッキングモードとアイトラッキングをサポートしており、手でアプリ操作を行うことが可能です。

 

更にカラーパススルー機能というモードを利用することでゴーグル前面にあるカメラで撮影した現実世界がVRゴーグルで表示されるビデオシースルー機能をも既に実現しています。

 

詳しい機能についてはVRアカデミーの卒業生でもあるYoutuberとして活動している「ミスターVR」の動画で詳しく解説していますので是非そちらをご覧ください。

 

■Meta Quest 2のハンドトラッキングとパススルー機能について

Meta Quest 2は2020年10月13日に発売されたVRゴーグルです。

Quest Proより安く、6月現在では47,300円で購入することが出来るVRゴーグルです。


こちらもハンドトラッキングとパススルー機能をサポートしており、

「Apple Vision Pro」に近いシステムでコンテンツを体験することが出来ます。


しかしQuest2に搭載されているカメラはモノクロのみになっているので現実世界は白黒に見えてしまいます。

※白黒ではありますが「Apple Vision Pro」に近しいコンテンツ開発を経験するという目的であれば勉強する価値は十分にあると考えます。

 

 

■Meta Quest Pro・Meta Quest 2 の特徴まとめ

 

上記結果をまとめるとApple Vision Proで提供されるUI・AR体験が既に実現出来る内容として下記項目が挙げられます。

 

  1. 　●ハンドトラッキングを用いた入力操作

  2. 　●アイトラッキングを用いた入力操作（Meta Quest Proのみ）

  3. 　●VR・AR切替機能（Quest 2のみモノクロの映像になる）

 

 

いかがでしょうか。この要素だけでも十分にApple Vision Proに近しいアプリ開発が出来るイメージを持てます。

 

 

 

◆ Meta Quest 3が今年秋に登場予定！

 

実はWWDC23が始まる前の２０２３年６月１日にMeta社より最新のVRゴーグルが今年に発売されることがアナウンスされました。

 

その名前も「Meta Quest 3」です！

 

これまで以上の高解像度・軽量化が行われ、更にこれまでにQuestProでしか出来なかったカラーパススルー機能に標準対応。

 

そして肝心のお値段ですが、日本価格にて74,800円で発売を予定しているとのことです。

 

さらなる詳細は２０２３年９月２７日に開催されるMeta社の技術者向けカンファレンスイベント、

 

「Meta Connect」にて発表されるとのことです。

 

ますます盛り上がりを見せるVR・AR業界はこれからも目が離せないこと間違いありません！！

 

 

 

◆Part２の記事はいよいよUnityを用いたARアプリ開発実践編

以上で簡単な最新のゴーグル型デバイスを用いたARアプリ機能の特徴解説は終了です。

 

次回記事はいよいよUnityを使ったQuest２・Quest Pro向けのARアプリ開発を行うための
UnityProject開発環境の構築について取り上げます。

 

次の記事はこちらからアクセス！

 

 


◆VRアカデミーからのご案内

 

ARエキスパートコース

 

現在VRアカデミーではVisionProを始めとするゴーグル型のARデバイスを活用したARアプリ開発の方法をより深く学べる授業を取り組んでいます。

またゴーグルだけに囚われず、WebAR・スマホARそれぞれの特徴と実装方法について学習し、目的に合わせた適切なデバイス選定と実際に開発が出来るエンジニアを目指すことが出来るカリキュラムをご案内しています。より詳しくスキルを学びたい方は是非受講をご検討してみてはいかがでしょうか。

 

■オープンキャンパス・個別相談会の紹介

 

VRアカデミーはスキルアップや新規事業の創出。またはVRコンテンツ開発企業に就職・転職を目指す様々な方の目的を支援しています。

生徒には様々なバックグラウンド・年齢層の方もいらっしゃいますので是非一度オープンキャンパスや個別相談会に参加していただくとより詳しい学校説明をご案内しています。

更にオープンキャンパス・相談会参加者には特別割引を実施中！是非お気軽にお申し込みください。

 

 

【土曜日開催】オープンキャンパス




開催日：毎週土曜日

時　間：60〜90分 (11:00〜18:00)

日　付： 毎週土曜日（下記リンクの予約表を確認してください）

場　所：新宿区西新宿1丁目5-11.新宿三葉ビル1F「NEUU」(新宿駅西口から徒歩3分)

※詳しくは申込み時にメールにてご案内させていただきます。

参加申込⇒https://vracademy.jp/opencampus/

専任のキャリアアドバイザーの学校説明と合わせて実際の授業の様子を見学できます。

どんなカリキュラムなのか。卒業生のVR・AR作品を体験したい方は是非お気軽にお申し込みください。

 

 

【平日10:30～21:00】オンライン個別相談会（現地相談も可）

開催日：平日の月〜金曜日開催

時　間：60〜90分 (10：30〜21:00)

参加申込⇒https://vracademy.jp/freesession/

各コースの詳細はもちろん、VRソフトの体験や業界についての質問等、様々な質問に個別で対応します。

入学をご検討中の方は是非お申し込みください。