コンピュータ上の仮想空間を現実世界のように疑似体験できる仕組み、仮想現実（VR＝バーチャルリアリティ）の技術は日々進歩しています。そのなかでも近年、さまざまな分野で用いられ始めているのが、VRのハンドトラッキング機能です。

この記事では、ハンドトラッキングとは何か、どのような活用方法があるのかをご紹介します。

ハンドトラッキングは「ハンド（手）」と「トラッキング（追跡）」の2つの意味からなる言葉で、ユーザーの手指の動きをリアルタイムに検知・認識する技術です。VRゴーグルは視覚的に仮想現実に入り込める技術ですが、ハンドトラッキングを活用すれば、仮想現実の世界に対してインタラクションできます。

例えば、実際の手指の動きを仮想現実上で再現したり、手指の動きに合わせてデジタルコンテンツを操作したりということが可能になります。

次に、ハンドトラッキングの技術が具体的にどのようなかたちで活用されているのかをご紹介します。

VR・AR・ゲームへのハンドトラッキング技術活用も盛んです。とりわけ、Ultraleapの3Dハンドトラッキング技術を活用することにより、ユーザーの手指の動きをリアルタイムに検知・認識でき、より詳細な操作感と没入感を得られるようになります。また、ゲームのみでなく、社員の教育用コンテンツとしても活用が進んでいます。 3Dハンドトラッキングセンサを活用したVRコンテンツ導入事例を以下のページで詳しくご紹介しています。

2Dや3Dのバーチャルアバターを使って活動するVtuberが増えていますが、ここでも、よりエンターテイメント性の高いコンテンツとしてハンドトラッキング技術が活用されています。従来のフェイストラッキングに加えてハンドトラッキングを用いることで、ボディランゲージやダンスライブなど、より多くのエンターテイメントを実現できます。

デジタルサイネージとは、ディスプレイやタブレットを用いてデジタルコンテンツを発信するシステムです。ショッピングモールや公共施設など多くで導入が進められていますが、近年ではデジタルサイネージとハンドトラッキングを組み合わせ、非接触で操作できるデジタルサイネージの導入も始まっています。

以下のページでは、3Dハンドトラッキングセンサを活用したデジタルサイネージの事例を詳しくご紹介しています。ぜひあわせてご参照ください。

近年、主に飲食店などでタブレットを用いたオーダーシステムの活用が進んでいますが、ここでもハンドトラッキング技術を用いたタッチレスオーダーシステムの実用化が始まっています。今後より導入が進んでいくでしょう。

続いて、ハンドトラッキング技術を導入できるツールとその特徴、導入方法などをご紹介します。

上記のようにハードウェアでハンドトラッキングを実現させる一方、ソフトウエアでハンドトラッキングを実現させるソリューションがあります。「AIベース・ハンドジェスチャー認識 ソフトウェアプラットフォーム」は、AIベースで手指の動きを解析することでハードウェアやアプリケーションに依存しないハンドジェスチャー認識を提供する、カナダのモーションジェスチャーズ社が開発したソフトウェアプラットフォームです。既存のスマートフォンやタブレット、医療・産業用機器、家電など、カメラを持つあらゆるデバイスに対してアドオンで組み込みができます。

【AIベース・ハンドジェスチャー認識 ソフトウェアプラットフォーム Motion Gestures】

AIベース・ハンドジェスチャー認識 ソフトウェアプラットフォーム Motion Gesturesの詳細は以下のページでご紹介しています。

2025年最新ハンドトラッキング技術トレンドとMotion Gesturesの技術解説ウェビナー動画も配信しております。ぜひお役立てください。

英国のウルトラリープ社が開発した「ウルトラリープ リープモーションコントローラー2」は、リアルタイムで両手の手指を検出し、複雑なジェスチャーも認識できる3Dハンドトラッキングセンサです。専用のXRヘッドセットマウントを使うことで、さまざまなVR・AR装置にハンドトラッキング機能を追加できます。また、デジタルサイネージで利用している既存のディスプレイに簡単に取り付けられ、非接触での操作を実現します。

【ウルトラリープ リープモーションコントローラー2】

ウルトラリープ リープモーションコントローラー2の詳細は以下のページでご紹介しています。

組込向け「3Dハンドトラッキングセンサ Stereo IR 170」は、組込用途で開発されたウルトラリープ社製の3Dハンドトラッキングセンサモジュールです。VR・AR端末やデジタルサイネージ、車載インターフェースなどに簡単にハンドトラッキング機能を追加でき、組み込み開発・検証で活用できます。

【3Dハンドトラッキングセンサ Stereo IR 170】

ハンドトラッキング技術は今後もさまざまな領域で活用され、ユーザーエクスペリエンスを高めるコア技術となるでしょう。医療・産業など、まだ活用があまり進んでいない領域においても活用が進むと考えられます。

例えば、英国Ultraeap社では、ユーザーインターフェースにハプティクス（触感フィードバック）を活用したデバイスを提供しています。ハプティクスとは振動により、デジタル空間においても触覚を再現する技術です。空中ハプティクス技術のパイオニア企業でもあるウルトラリープ社が、2023年にリリースした「HDK-REC192」というデバイスにより、何もない空間に超音波を用いた触感提示を行うことが可能です。XR、医療、車載HMI等への活用が期待されています。

また、2024年にApple社が販売を開始したMRヘッドセット「Vision Pro」には、簡単なハンドトラッキングの機能が実装されています。バーチャル空間の操作をコントローラー無しで実現しています。iPhoneが初めて登場した当時、タッチパネルでのピンチ、ズーム等の操作をするのも一苦労でしたが、ハンドトラッキングによるジェスチャー操作も同様のフェーズと考えられます。今後、様々な機器にハンドトラッキング機能が搭載されることで、一般的な技術になっていくでしょう。

ハンドトラッキングは、ユーザーの手指の動きをリアルタイムに検知・認識する技術です。ハンドトラッキングを利用すれば、VR・ARなどの世界に対してもインタラクションできるようになり、エンターテイメントをはじめ医療や産業など多くの領域で新しい体験を得られるようになります。

近年、あらゆるデバイスに対してハンドトラッキング機能を追加できる製品が登場しています。ハンドトラッキングの活用にご興味をお持ちの際はお気軽にお問い合わせください。