Webcam Motion Capture

このVTuber トラッキングソフトを選ぶ理由は、まず手のトラッキングにある。Webカメラ モーションキャプチャとして普通のWebカメラから指の位置を読み取るため、グローブも深度センサーもなしで手を振れる。速い動きにも追従すると提供元は説明しており、肘から先が画面に入っていると結果がはっきり良くなる。

顔トラッキングは頭の回転だけでなく、表情・視線・まばたきを読み取る、iPhoneやiPadの顔追跡アプリが使うPerfect Sync形式にも対応する。該当するスマホを持っていれば、デスクトップ版と組み合わせることでWebカメラ単体よりはるかに豊かな表情になる。

肩と胴の動きも手と一緒に入ってくるため、長時間の配信でもアバターが固く見えない。顔だけのツールとの差はここにあり、照明が落ちると最初に崩れるのもこの部分だ。

追跡データはVMC protocolに対応するアプリへ送れる。VSeeFace、Virtual Motion Capture、無料のUnity・Unrealプラグイン経由のゲームエンジンが対象だ。既存のアバターソフトを置き換えるのではなく、機能を足す立ち位置になる。

FBX 書き出しなら、セッションを録画してFBXで保存するとBlender、Maya、3ds Maxで開ける。個人アニメーターにとっては安価に参照モーションを取る手段であり、仕上げには手直しが要る。

レシーバーはVRoid Studio製を含む標準のVRMファイルを読み込み、カスタムシェーダー付きのVRChatアバターもそのまま扱う。肌の色、輪郭線、トゥーンシェーディングは読み込み後も保たれ、VRChatと同じ見た目で配信できる。

追跡機能はすべてサブスクなしで動く。課金すると配信や録画のためにUIを隠せるようになり、VMC protocolやFBXでの外部アプリ連携も使える。紹介制度を使えば、新しい利用者が自分のコードで登録するたびに1か月分が無料になる。