スマホ版VRChat:スマホのみでフェイストラッキングを利用する

スマホ版VRChat(Android)の基本情報

スマホのみでアバターの体の一部を動かせる

 VR空間でユーザー同士がコミュニケーションを楽しめる、知名度・ユーザー数ともに世界最大級のソーシャルVR(≒メタバース)アプリ「VRChat」。

 そのVRChatのスマホ版(Android)に2024年12月、「Selfie Expression」機能が導入されました(バージョン2024.4.2)。

 同機能はスマートフォンのインカメラを使用して、スマホのみでアバターの頭部・目・表情(口の動きなど)をトラッキングするというもの。本記事ではそのトラッキング機能の使いかたを解説します。

VRChat公式による機能解説動画(5:41~)。発表直後のものなので、現在とは設定項目などが多少異なる

フェイストラッキングの設定方法

 アバターのトラッキング機能は、メインメニューの「トラッキングとIK」で設定できます。タテ画面の簡易メニュー(Launchi Pad)では該当項目が出現しないので注意が必要です。

アプリのUI日本語化についてはこちらの記事を参照してください。

「トラッキングとIK」の呼び出し手順

スマホ版VRChat:簡易メニュー画面
タテ画面のメニュー(Launch Pad)から右上の別ウィンドウアイコンをタップ
スマホ版VRChat:フルメニュー画面(1)
強制ヨコ画面から右上の歯車アイコンをタップ(まだフルメニューではない)
スマホ版VRChat:フルメニュー画面(2)
フルメニューにすると「トラッキングとIK」の項目が出現

「トラッキングとIK」の項目&設定

 「トラッキングとIK」には大きく「カメラトラッキング」「アイトラッキング」「キャリブレーションとデバッグ」の3項目がありますが、後者2つは効いているか確認できなかったため、今回は「カメラトラッキング」のみ解説します。

 なお、インカメラの正確な必要スペックは不明ですが、公式ドキュメントによれば「Pixel 6相当以降」でほぼ動作するとしています。

スマホ版VRChat:トラッキング設定画面
設定は「カメラトラッキング」「アイトラッキング」「キャリブレーションとデバッグ」の3項目があるが、スマホ版ですべて対応しているかは確認できず

カメラトラッキング

上半身カメラトラッキングを有効にする
 オンにするとトラッキングを開始。

上半身カメラトラッキングの品質を自動調整
 トラッキングの品質を自動調整する。ただし端末によっては負荷がかかってトラッキングがオフになってしまうため、オフにしておくのが安全。

上半身カメラトラッキングの品質
 パフォーマンス/バランス/高品質/最高品質の4段階(オフを選ぶとトラッキング停止)。品質を上げるほど端末に負荷がかかると思われる。「自動調整オフ」+「パフォーマンス」がもっとも安定しそう。

自動補正の速さ
 0~100の間でパラメータ調整可能(デフォルトは25)。効果のほどは体感できず。

スマホ版VRChat・トラッキングの例

スマホ版VRChat:上半身トラッキング(1)
トラッキングオンにするとアバターの姿が画面左下に出現
スマホ版VRChat:上半身トラッキング(2)
アバターの上半身の姿勢をトラッキング
スマホ版VRChat:上半身トラッキング(3)
常にインカメラに自分の姿を入れておく必要がある
スマホ版VRChat:表情トラッキング(1)
対応アバターなら表情トラッキングも可能
スマホ版VRChat:表情トラッキング(2)
口のトラッキングにも対応
スマホ版VRChat:表情トラッキング(3)
アイトラッキングの設定をしていなくてもまばたきは可能

トラッキングの注意事項

 アプリをスマホのメニュー(Androidメニュー)から終了させると、トラッキングの設定はリセットされてしまいます。設定を維持したい場合は、VRChat内のメニューから終了させましょう。

スマホ版VRChat:アプリ終了手順(1)
Launch Pad→設定→電源アイコン(右上)をタップ
スマホ版VRChat:アプリ終了手順(2)
アプリ内から終了させることでトラッキング設定を維持

スマホ版VRChatのダウンロードはこちらから

 Android版VRChatはGoogle Playからダウンロードできます。未入手の人は下記からダウンロード&インストールしてください。

VRChat [Beta]

VRChat [Beta]

VRChat Inc.無料