VTuber全身トラッキングはどうやる？機材や手順を解説

全身トラッキングは、VTuber活動やVRChatなどのコンテンツで、アバターの身体を動かせることから、没入感を高めることができる重要な技術です。
今回は、初心者からプロまでを対象に、VTuberの全身トラッキングに必要な機材やソフトウェアの選び方、導入手順を詳しく解説していきます。

VTuber全身トラッキングとは？

VTuberの全身トラッキングとは、フルトラッキングとも言う、人間の身体全体の動きを正確にデジタルアバターに反映させる技術です。
リアルタイムでアバターに自然な動きをさせることが可能です。

VIVEトラッカーやmocopiなどの機材やアプリ、ツールを使用して、人間の身体の動きのデータを取得し3Dモデルに反映させることで、
頭と両手だけでなく、両足や腰など身体全体の動きを連動させることができます。

全身トラッキングを活用することで、ダンスや複雑なジェスチャーを伴うパフォーマンスを視聴者に届けることができます。
また、フェイシャルトラッキングやハンドトラッキングと組み合わせることで、
感情や細かい動作まで表現の幅が広がり、キャラクターの個性を存分に発揮することができるのです。
全身トラッキングは、VTuber活動だけでなく、VRChatなどのバーチャル空間での活用も進んでいます。

VTuberの表現力や没入感を大幅に向上させる技術であり、ダンスや複雑なジェスチャーを伴うパフォーマンスが可能です。
現在、初心者からプロまでが利用可能なツールや機材が充実しています。

全身トラッキングに必要な機材とソフトウェア

全身トラッキングには、動きを取得するための機材と、それをアバターに反映するためのソフトウェアが必要です。
映画撮影やゲーム制作で使われるような非常に高額なデバイスから、初心者でも安価に購入できるものもあります。

ここでは、物体に取り付け動きを取得するトラッキングデバイスと、webカメラを用いてアバターに動きを反映するモーションキャプチャーツールを紹介します。

VIVEトラッカー

VIVEトラッカーは、設置したベースステーションというセンサーから送信される光線を受け取ることで、
物体の動きを読み取る、光学式モーションキャプチャーのフルトラッキングデバイスです。
VIVE Focus Vision等のVR用HMD（ヘッドマウントディスプレイ）に連携した機材のため、VRChatで活動したい方に人気です。
高額ではありますが、反射や受光部の遮り等の環境がなければ、非常に正確に座標を読み取ることができます。

mocopi

mocopiは全身の動きをフルトラッキングできるモーションキャプチャシステムです。
小型のセンサーをとりつけるだけで、スマートフォンの専用アプリを用いてリアルタイムのモーションデータを取得できるため、手軽に3Dフルトラッキングを実現することができます。

Webcam Motion Capture

Webcam Motion Captureは、VTuberの3Dモデル向けモーションキャプチャーツールです。
トラッカーを使わず、Webカメラやスマートフォンのカメラを利用して3Dアバターを動かすことができます。
安価で高品質なフェイストラッキング、ハンドトラッキングにも対応しています。

ThreeDPoseTracker

ThreeDPoseTrackerはトラッカーを使わず、Webカメラのみでフルトラッキングができるソフトです。
無料で利用ができるため、初めて3Dモデルのフルトラッキングを試したい場合にも始めやすいという利点があります。

全身トラッキングを導入するためには、活動方針に合った適切な機材とソフトウェアの組み合わせを考えることが重要です。

全身トラッキングを行うための手順

全身トラッキングを行う手順は、使用するデバイスやサービスによって異なります。
また、センサーが組み込まれたスーツを装着する慣性センサ式と、
カメラを用いてセンサーから送信される光線を取得する光学式の2種類があるので、活動内容や予算に合わせた機材を選びましょう。

今回は、光学式の全身トラッキングの基本的なステップについて解説します。

ベースステーションの設定と設置
まず、SteamVR等セットアップツールをインストール、ベースステーションの設定を行ったあと、室内にベースステーションを設置します。
トラッカーの設定と装着
トラッカーからのデータを受信したいPCにデータ受信のためのドングルを接続します。
セットアップツール等を用いてトラッカーとのペアリング接続を行い、動きを取得する対象物にトラッカーを装着します。
トラッキング環境の確認とテスト
ソフトウェアや機材の設定が終わったら、トラッキング環境の確認とテストをしましょう。
実際にアバターを動かしてみて、不自然な動きがないかどうか確認します。
配信開始
不具合がなければ配信用の配信用のソフトを設定し、配信を開始します。

VTuber活動でのメリット

全身トラッキングを導入することで、VTuberの動きや表現が、視聴者をより深い没入感へといざないます。

全身トラッキングの導入により、全身を動かせるようになるので、2Dよりもリアルで多彩な表現が可能となります。
動きがダイレクトに反映されるため、全身の動きでキャラクターの個性を表現することもできます。
他のVTuberとの差別化も図れるため、視聴者である顧客のファンがつくようになります。
人気が出ればグッズ展開やコラボ展開により、VTuberの活動の幅が広がります。

全身トラッキングは、VTuberの活動クオリティを向上させるだけでなく、ファンがつくことによって活動の幅も広がります。

全身トラッキングでVTuber活動を次のステージへ

全身トラッキングは、VTuber活動における表現力と没入感を飛躍的に向上させる重要な技術として、近年注目が集まっています。
自社の活動内容に合う必要な機材やソフトウェアを正しく選び、設定を適切に行うことで、
ダンスやライブ配信、VRChatでの活動がよりリアルに発信できます。
この技術を活用して、VTuber活動の幅を広げ、ファンを獲得しましょう！