全身追跡がソーシャル VR にどのような革命をもたらすのか

画像クレジット: HaritoraX トラッカー by Shiftall

没入感は、仮想現実体験の最も重要な要素の 1 つです。企業が没入感を強調して自社の VR 製品を宣伝する中、消費者の期待はこれまで以上に高まっています。 168 億ドル規模の産業である仮想現実は、他の媒体では再現できない非現実的な体験を生み出すことができます。しかし、それが不自然に感じられれば感じるほど、その経験からは遠ざかってしまいます。 VR への没入で最も重要な側面の 1 つは、私たち自身の身体です。そこで全身追跡の出番です。全身追跡と推定がソーシャル VR の体験方法をどのように変えるのか、そしてその先に何が待ち受けているのかについて話しましょう。

私の足はどこですか?

数年前のメタの誇大宣伝サイクルの頃、没入感はよく議論されるトピックでした。メタ社の仮想現実への飛躍を促すマーケティングの推進により、消費者が完全に没入できる世界が約束されました。クエスト 2 を 2022 年 6 月までに1,480 万人の手に届けるために費用を補助した後、没入感に対する幻滅の谷はすぐに訪れました。始まる。

2023 年 12 月のSteam の VR ハードウェア調査では、Oculus Quest 2 が PC VR プラットフォームで最も使用されているヘッドセットであることが明らかになりました。

スタンドアロンの Quest 2 ハードウェアをサポートするために必要な漫画風のグラフィックは別として、多くの人にとって最も重要な点は足がないことでした。ヘッドセットのカメラとコントローラーの位置からの情報だけでは、姿勢推定で達成できることは限られています。しかし、消費者は当然、それ以上のものを求めました。

Google トレンドのデータによると、全身追跡に関する検索への関心が過去 5 年間で大幅に増加したことが明らかになりました。 2022 年以降、急増と安定を繰り返しており、消費者がこのテーマに関心を持っていることがわかります。 SlimeVR のような IMU トラッキングが支援者向けに出荷され始めたばかりで、スタートアップ企業にとって、ソーシャル VR ユーザーをサポートするトラッカーを開発、リリースすることで競合に先んじるには、今が極めて重要な時期です。しかし、全身追跡とは何でしょうか?なぜ人々はそれをそれほど切望しているのでしょうか?

フルボディトラッキングとは何ですか?

VR 愛好家が足の正確な追跡を望んでいるなら、これが消費者にとって長年にわたってアクセス可能であったことを知ると驚くかもしれません。 Vive は、2017 年に最初のベースステーション対応トラッカーをリリースしました。当初は VR 内で現実世界のオブジェクトを追跡できるようにするために販売されましたが、すぐにプレーヤーによって脚、膝、肘、胸などの体の一部を追跡するために採用されました。

フル ボディ トラッキング (FBT) を使用すると、VR ユーザーとモーション キャプチャ アーティストが自分の体を可能な限り追跡できるようになります。どちらの場合も、ユーザーは現実世界の体の動きをアバターの動きに変換します。 FBT では、VR ユーザーが他の方法で行うよりもはるかに多くの表現とボディランゲージが可能になります。全身トラッキングは、VRChat などのソーシャル VR プラットフォームで非常に人気があります。

全身トラッキングにより、VRChat でのダンスなどのアクティビティがよりダイナミックになります。画像ソース。

より自由な動きと VR への没入感を高めることが目標の場合、次の 3 つのアプローチがあります。

• 灯台ベースの追跡: Vive、Tundra トラッカー、外部基地局によって測定されます。

• 慣性測定ユニット (IMU) 追跡:すべての測定は、オンボードセンサーによって内部で行われます。

• 全身推定:限られた情報に基づいて身体の最も可能性の高い位置を計算する全身追跡の代替手段。

  
  

それぞれの例を詳しく見て、長所と短所、およびその可能性を見てみましょう。

灯台の追跡

VR 向けの最も人気があり正確な消費者レベルの全身追跡ソリューションは、灯台追跡です。基地局から電力を供給され、体に固定されたトラッカーの位置は視線によって測定されます。 Vive と Tundra はこの分野の主なメーカーであり、信頼性が高く使いやすいことで知られています。

ただし、灯台ベースの追跡は高価です。消費者は、トラッカーを 1 台あたり数百ドルで購入する必要があるだけでなく、トラッカーを取り付けるための高価なベース ステーションとシェルフも必要になります。 Lighthouse ベースのトラッキングはオクルージョンの問題の犠牲になる可能性があるため、トラッカーが衣服や毛布などの他の物体によって隠れることはありません。

慣性計測ユニット (IMU) の追跡

VR で人気が高まっているテクノロジーは IMU トラッキングです。個別のセンサーを利用する IMU トラッカーは、機能するために基地局を必要としません。完全にワイヤレスでバッテリー駆動も可能です。ただし、設置と操作はより困難です。 IMU トラッカーはセットアップが難しく、ドリフトしやすいため、セッション中に時々再調整が必要になります。

IMU トラッカーには、視線を必要としないという利点があります。これは、衣服や他の物体によって塞がれる可能性があることを意味します。この追跡テクノロジーは安価ですが、選択肢はそれほど多くありません。ソニーの Mocopi トラッカーは現在入手可能ですが、かなり高価です。それにもかかわらず、Mocopi トラッカーは依然として灯台ベースの追跡ソリューションよりも安価です。

SlimeVR には、ESP-32/8266 およびさまざまな IMU ハードウェアで使用できるファームウェアがあります。

IMU トラッキングの新星は、オープンソースの全身トラッキング プロジェクトであるSlimeVRです。 SlimeVR を使用すると、適切なハードウェアがあれば誰でも独自の IMU トラッカーを作成できます。クラウドファンディング キャンペーンの成功により、お客様は今すぐ構築済みの SlimeVR トラッカーを注文できるようになりました。ただし、発送までに時間がかかり、納品までに数か月かかります。 SlimeVR プロトコルを使用する代替手段がいくつかあります。 owoTrackは、Android スマートフォンのセンサーを全身トラッカーとして使用する Android アプリです。

全身推定 (FBE)

本当の意味での「全身追跡」ではありませんが、全身推定は前の 2 つのオプションの代替ソリューションです。体の各部分に専用のトラッカーを使用する代わりに、FBE はプログラムがすでに持っているデータに基づいて体の位置を計算します。通常、これは VR ヘッドセットとコントローラーの位置を使用して行われます。ただし、別のアプローチでは Xbox Kinect センサーや Web カメラなどを使用する場合があります。

Standable は、SteamVR と互換性のある全身推定の最も人気のあるプロジェクトの 1 つです。オープンソース プロジェクトではありませんが、その互換性と使いやすさはユーザーの間で人気があり、Steam 上のレビューの 74% が肯定的です。これは、より高価な追跡ソリューションを購入する余裕がない人、または単に VR で自分の身体を測定するためのより正確なものを試したい人にとっては素晴らしいオプションです。

Meta は、Quest 3 でもこのアプローチを採用しており、「インサイド アウト フルボディ トラッキング」機能を備えていますが、これは実際には単なる FBE です。

全身追跡の将来はどうなるでしょうか?

全身追跡に対する消費者の関心が高まり安定していることから、全身追跡に対する消費者の需要が高まっていることは明らかです。それほど明確ではないのは、市場がどのように反応するかということだ。 FBT での顧客の購入選択に影響を与える変数は 3 つあります。

• セットアップの難しさ

• 料金

• 精度と性能

  
  

業界としての VR は幻滅の谷から回復し始めています。ただし、VR 愛好家にとって、全身トラッキングのテクノロジーは長い間存在していましたが、消費者にとって最もアクセスしやすい形式ではありませんでした。最も簡単で最高のパフォーマンスを実現するトラッカーには、多額の投資が必要です。

ただし、SlimeVR のようなオープンソース IMU ソリューションの台頭は、将来の市場の混乱を示唆しています。より多くの企業が市場に参入し、高性能で利便性の高い、競争力のある価格の IMU 追跡ソリューションを販売すれば、莫大な利益が得られます。企業が灯台ベースの追跡コストを削減する方法を見つけ出した場合にも、同じことが言えます。

IMU ソリューションとは別に、全身推定方法も改善されています。おそらく、ほとんどの人にとって最もシンプルで最良の選択肢は、トラッカーをまったく使用しないことかもしれません。 FBE は不完全ではありますが、ほとんどのユーザーにとって VR エクスペリエンスの品質と没入感を向上させるための優れた出発点です。

市場がどのように変化するかは時間が経てばわかるだろうが、SlimeVR のクラウドファンディングトラッカーがついに出荷され始めたため、誰かの顔を蹴ったり、VR で踊ったりする機能に対する需要の高まりに企業がどのように対応するのか、私は非常に興味がある。