VRCast

かんたんスタート

VRCast は VRChat 用のアバターを単体で表示し、OBS などの配信ソフトに映すアプリです。 VRCast を起動すると左のパネルに はじめに タブが開き、同じ手順を画面上で案内します。

  1. Unity でアバターを .vrcaster ファイルに書き出す
  2. .vrcaster を VRCast のウィンドウにドラッグ&ドロップ
  3. VRM(.vrm、VRoid など)なら書き出し不要で、そのままドラッグ&ドロップ(VRM について)
  4. はじめに タブの 透過にする を押す
  5. OBS で ゲームキャプチャ を追加して 透過を許可
  6. Tab キーで操作パネルを隠す

1. アバターを書き出す(Unity)

アバターの入った Unity プロジェクト(VCC で作ったプロジェクトで OK、Unity 2022.3.22f1)で作業します。

  1. 配布 zip(Jinxxy のセットアップ版は展開先)の VRCast-Converter フォルダ(本体の VRCast フォルダとは別)にある VRCast-Converter-バージョン.unitypackage をダブルクリック(または Unity にドラッグ&ドロップ)して Import を押します(Assets/VRCast/Converter に入ります)。
  2. メニュー VRCast > Avatar Exporter を開きます。見出しの横とタブに、書き出しツールの版が出ます(アプリの版とは別です)。
  3. シーン上のアバター(一番上の親オブジェクト)を指定して 書き出す... を押し、保存先を選びます。 画面は Unity の OS の言語で表示されます(上部の 言語 で切り替え可能)。

元のアバターは変更されません。表情・口パク・まばたき・揺れもの・Constraint の設定も一緒に書き出されます。

非アクティブのオブジェクトも書き出す(既定 ON)が ON なら、シーン上で非アクティブ(チェックを外した)オブジェクトも OFF のまま書き出されます。VRCast の オブジェクト タブでいつでも ON にできるので、書き出し前に ON にする必要はありません(ファイルは大きくなります)。OFF にすると、非アクティブのオブジェクトは子も含めて書き出されません(パーティクルを除く)。

ブレンドシェイプは Unity のシーンで設定した値のまま書き出されます(シーンのブレンドシェイプの値を優先する、既定 ON)。 衣装の切り替えに合わせて縮小用ブレンドシェイプを FX で動かしている場合などは、OFF にすると VRChat に入ったときの初期状態の値で書き出します。

FX レイヤーにある表情クリップは自動で書き出されます。FX に入っていない表情(昔のアバターに付属していた表情アニメーションなど)は、 書き出し画面の 追加の表情 にアニメーションクリップかフォルダをドラッグすると表情として書き出せます(ブレンドシェイプを動かすクリップが対象。人体以外のボーン(しっぽ・耳・服など)が時間で動くクリップも、選んでいるあいだ再生されます。人体のボーンは入りません。指定はアバターごとに保存)。

シーンに FaceEmo の設定があれば、そのアバターの表情を FaceEmo のモード名で自動的に書き出します(FaceEmo の「アバターに適用」をしていなくても可。小物の表示などは除き、ブレンドシェイプの部分だけを使います)。

【ベータ版】VRCFury や Modular Avatar などで改変したアバターは、そのまま指定すれば改変後の姿(衣装の統合・追加した表情やトグル)で書き出されます。 MA の Merge Armature / Bone Proxy で付けた衣装・小物は、統合されなかった場合でもアバターのボーンに付け替えて体に追従させます。 MA の Blendshape Sync で口などに追従させたチェーン・小物も、口パク・まばたき・トラッキングに追従します。 暫定対応のため、正しく書き出せない場合があります。

Package Manager で入れる場合は、Window > Package Manager の + > Add package from git URL... に https://github.com/coffin299/VRCast.git?path=/Packages/com.vrcast.converter を入力します(Git が必要)。unitypackage と両方入れるとエラーになるので、どちらか一方にしてください。

2. VRCast で読み込む

  • .vrcaster または .vrm ファイルを VRCast のウィンドウにドラッグ&ドロップすると読み込まれます。
  • 体の位置や向きが原点から大きくずれているアバターは、読み込み時に足元を原点へ置き、立って正面を向くよう直します(少しのずれはそのままです)。原点を補正する でも同じ補正をかけ直せます。原点をアバターに戻す でファイルに入っていた配置に戻せます(このアバターは次回もそのまま。クイック設定の読み込み欄も同じです)。
  • または はじめに タブの ファイルを選ぶ...、 アバター タブの 参照... で選べます。
  • 最後に読み込んだアバターは次回起動時に自動で読み込まれます。
  • アバター タブの 最近使ったアバター に直前に使ったアバターが最大 10 件並び、クリックで切り替えられます。名前の下には入れた(ドロップ・参照・読み込みボタンで読み込んだ)日時が出ます(× を押してから 外す で一覧から外します)。 カメラ・ライト・アバターの明るさ・待機ポーズ・体の向きはアバターごとに記憶され、切り替えると戻ります。
  • 一覧はアバターごとの画像付きのタイルで並びます。タイルの 画像 で PNG / JPG / GIF(GIF はアニメーションします)を設定できます。 表示中のアバターには、画像をウィンドウにドロップしても設定できます。外すときは 状態 の 画像を外す を押します。 画像の無いアバターは、読み込むと顔を自動で撮って一覧の画像にします。状態 の 顔を撮る で撮り直せます。

.vrcaster と .vrm 以外のファイル(画像や unitypackage など)は読み込めません。.vrcaster でエラーが表示された場合は書き出し直してください。

VRM を読み込む

  • VRM 0.x / 1.0 の .vrm(VRoid Studio などで作ったもの)は、Unity での書き出しをせずにそのまま読み込めます。
  • VRM の表情(喜怒哀楽・驚き・独自の表情)、まばたき・ウインク、あいうえおの口の形、揺れもの(SpringBone)を VRCast の表情・自動まばたき・口パク・揺れものとして使います。
  • アバター タブに VRM のバージョン(0.x / 1.0)と作者が表示されます。

マテリアルの色を変える表情、VRM のコンストレイント、目のボーンが無いモデルの視線(BlendShape 方式)は反映されません。VRM に書かれた利用条件を守って使ってください。

3. OBS に映す

  1. VRCast の はじめに タブ(または グラフィック タブ)で背景を 透過 にします。 VRCast の画面では背景色のまま見えますが、OBS では背景が抜けます。
  2. OBS の ソース の + から ゲームキャプチャ を追加します。
  3. モードを 特定のウィンドウをキャプチャ、ウィンドウを [VRCast.exe]: VRCast にします。
  4. 透過を許可 にチェックを入れます。
  5. VRCast で Tab キーを押して操作パネルを隠します(パネルも OBS に映るため)。隠している間は、透過を OFF にしていても OBS では背景が抜けます。

ウィンドウキャプチャ は透過に対応していません。透過したいときは必ず ゲームキャプチャ を使ってください。

仮想カメラ(Discord / Zoom など)

  1. 出力 タブで仮想カメラの出力を ON にします。
  2. 初回だけ ドライバーを登録 を押します(管理者の確認が出ます)。
  3. 使いたいアプリのカメラ選択で VRCast Camera を選びます(出ない場合はそのアプリを再起動)。

操作パネルは仮想カメラには映りません。Discord などは透過できないため、背景は背景色で映ります。 VRCast のフォルダを移動・削除する前に ドライバーを解除 を押してください。

出力タブに「準備できました」と出ている間は、まだどのアプリもカメラを開いていない状態です(エラーではありません)。受け取る側のアプリで VRCast Camera を選ぶと「送信中」に変わります。

Discord などでカメラが起動しないとき(Windows 11)

  1. 出力 タブで Windows 11 の方式(Media Foundation)で出力する を ON にします。
  2. この方式のドライバーを ドライバーを登録 で登録します(方式ごとに 1 回。管理者の確認が出ます)。
  3. 使いたいアプリで VRCast Camera (MF) を選びます。

Windows の通常のカメラとして扱われるため、従来の方式が一覧に出ない・起動に失敗するアプリでも使えることがあります。VRCast の起動中で出力が ON の間だけ一覧に出ます。ドライバーは Program Files にコピーされるため、VRCast のフォルダを移動しても登録し直す必要はありません。

Spout2(OBS へ軽く・透過のまま)

  1. OBS に Spout2 プラグイン を入れます。
  2. 出力 タブの Spout2 で 出力する (VRCast) を ON にします。
  3. OBS で Spout2 Capture ソースを追加し、送信元に VRCast を選びます。
  4. 背景を透過するなら、VRCast で 背景を透過する を ON にし、OBS の Spout2 Capture ソースのプロパティで Composite mode を Default にします(そのままだと背景が透過しません)。

GPU 上で映像を渡すので、ゲームキャプチャや仮想カメラより軽く、背景の透過もそのまま届きます。操作パネルは映りません。解像度は VRCast のウィンドウの大きさです。

見た目・ライト(表示・グラフィックタブ)

カメラと解像度は 表示 タブ、背景・ライト・輪郭線は グラフィック タブにあります。

項目 内容
カメラ 画角の変更とリセット。右ドラッグで回転、中ドラッグで移動、ホイールでズーム。カメラの位置と画角はアバターごとに記憶され、再起動後も戻ります。カメラを固定 を ON にすると、マウスのドラッグ・ホイールで動かなくなります(画角とリセットは使えます)。体に入り込まない(既定は ON)の間は、近づけても体の手前でカメラが止まり、それ以上は画角を狭めて大写しにします(配信中に体の中が映るのを防ぎます)。
背景 背景色(既定はベージュ)と透過の切り替え。透過中も VRCast の画面では背景色が見えますが、OBS のゲームキャプチャでは抜けます。
解像度 ウィンドウの大きさ(横長・縦長のプリセット)。
ライト 環境光 はアバター全体を均一に明るく、太陽光 は一方向から照らします。 暗いときは 晴れ プリセットを押すか環境光を上げてください。太陽光の色 は低いほど暖色。 向き 0 で正面から当たります。ライトで明るくならないときは アバターの明るさ を上げます。ライトとアバターの明るさはアバターごとに記憶されます。
輪郭線 太さ でアバターの輪郭線(lilToon / MToon / Poiyomi / UTS)を太く・細くできます(0〜3、1 = マテリアルのまま、0 = 輪郭線なし)。マテリアルのまま(1) で元に戻ります。アバターごとに記憶されます。

体・ポーズ タブではアバターの向き・腕の下ろし方を、顔・表情 タブでは表情を変更できます。 表情ごとにショートカットキーを割り当てられます(既定はすべて未割り当て)。キーのボタンを押してから割り当てたいキーを押し(Ctrl+Alt+N のような同時押し、テンキー(NumLock ON で数字キーと区別)、記号キー、右 Ctrl などの単独(押して離す)、マウスのサイドボタンも可)、Esc でやめられます(Tab は使えません)。隣の リセット で割り当てを外します(アバターごとに保存)。 VRCast が背面にあるときも使う(既定 ON)なら、OBS などを操作中でも切り替えられます。ほかのアプリで文字を入力している間も反応するため、Ctrl や Alt との組み合わせがおすすめです。 ボタン・キーで選んだ表情は固定され、トラッキングの自動検出では変わりません。同じ表情をもう一度選ぶか 自動検出に戻す で元に戻ります。 小物の切り替えなども含むクリップから BlendShape だけを取り出した表情は、既定では一覧に出ません。ほかのクリップも表示 を ON にすると出ます(該当するクリップがあるアバターだけ表示)。 追加の表情で体以外のボーン(しっぽ・耳・服など)も動くクリップは、その表情を選んでいるあいだ再生されます。ブレンドシェイプが無いものは同じタブの ボーンの動き で 1 つだけ選べます(体のトラッキングはそのまま)。 操作・連携 タブで 外部から操作(OSC / HTTP) を ON にすると、表示中のアバターの表情ごとのコマンドが一覧に並び(コピー でコピー)、ポートの下に OSC の送信先と HTTP の URL が表示されます(ブラウザで状態を開く で動作確認。Stream Deck では「Web サイト」の「バックグラウンドで GET」に URL 全体を設定)。Stream Deck や OSC アプリから表情を切り替えられます(この PC からのみ。例: http://127.0.0.1:39571/expression?name=Smile&toggle=1、OSC /vrcast/expression "Smile"。番号は 0 = ニュートラル、1 以降 = 表情の並び順)。

体・ポーズ タブの 待機モーション(既定 ON、Humanoid のみ)は、Web カメラを使っていないときにアバターが完全に止まって見えないよう、呼吸・体の揺れ・頭のゆらぎを少し足します。 呼吸・体の揺れ を OFF にすると止まります。ON のときは 呼吸・体の揺れ・頭のゆらぎ の強さ(0〜2、1 が標準)と 速さ(0.5〜2 倍)を調整できます。 顔のトラッキング中は頭のゆらぎを止め、本人の動きに任せます。 同じタブの 揺れもの で、揺れもの(PhysBone の近似)を ON/OFF できます。

衣装・小物・パーティクルの ON/OFF(オブジェクトタブ)

アバターにパーティクル(Particle System)があると、オブジェクト タブの下に パーティクル 欄が出ます。エフェクトごとのスイッチ、または すべて ON / すべて OFF で表示を切り替えられます(アバターごとに保存)。 最初は VRChat の初期状態(FX のトグル)どおりで、ON にすると非表示の親のオブジェクトも表示します。新しい書き出しツールで書き出し直したアバターで使えます。 書き出し時に OFF のパーティクルも書き出されるので、書き出し前にすべて ON にする必要はありません。VRChat で一緒に ON/OFF するもの(FX のトグル・エフェクトのフォルダー)は 1 つにまとめて表示します。 名前を変更 で表示名を付けられ(空にすると Unity 上の名前に戻ります)、各行の下に Unity 上の場所(パス)が出ます。

アバターの中身が Unity のヒエラルキーと同じ並びで出ます。チェックを入れると表示、外すと非表示になります(Unity のインスペクターのチェックと同じ)。切り替えはアバターごとに保存されます。 書き出しツールの 非アクティブのオブジェクトも書き出す(既定 ON)を ON にして書き出すと、シーンで OFF にしていた衣装・小物も OFF のまま入るので、ここで ON にできます(1.18.7 以降の書き出しツール)。

VRChat のメニューで切り替えるものだけ を ON にすると、VRChat の Expression Menu(FX のトグル)で切り替えている衣装・小物だけが並びます(該当するものがあるアバターでは最初から ON)。 OFF にすると、▶ / ▼ で開閉できる木の表示になります。ボーン・空のオブジェクトを隠す(既定 ON)でメッシュの無い行を省き、検索 で名前の一部から探せます。 変更を元に戻す で読み込んだときの状態に戻ります。親が OFF のため見えていない行は薄く表示されます。

口パク・まばたき(顔・表情タブ)

  • マイクで口パク を ON にしてマイクを選び、音量 メーターを見ながら マイク感度 と ノイズゲート(この音量以下は無音)を調整します。
  • 母音で口の形を変える が ON なら、VRChat と同じように「あいうえお」で口の形が変わります。 判定がずれるときは 声の高さ補正 を動かします(声が高い人は右)。
  • 自動まばたきも ON/OFF できます(揺れものは 体・ポーズ タブ)。
  • 表情中はまばたきしない を ON にすると、表情を出している間は自動まばたきもトラッキングのまばたきも止まり、表情の目の形が崩れません。
  • まばたき / 目線 の カメラ目線 を ON にすると、目を画面に向けます(トラッキングの視線の代わりに使い、トラッキングを切っていても効きます)。パネル下部のボタンやショートカットキー(既定はテンキーの 5。操作・連携 タブで変更可)でも切り替えられます。
  • 表情中はマイクの口パクを止める・表情中はトラッキングの口を止める を ON にすると、表情を出している間はそれぞれの口の動きが止まります(別々に選べ、両方 ON にもできます。表情の口とリップシンクが重なると崩れるアバター向け)。
  • シェイプキー設定 タブの BlendShape の上限 では、BlendShape ごとに動く最大値(100 = 制限なし)を決められます。まばたきで目が消える・口を開くと顔が崩れるときは、その BlendShape を下げてください。 対象 で 顔(まばたき・口・表情)(まばたき・口パク・表情・パーフェクトシンクで動くもの)か その他(体型・服など)を選び、検索 で絞り込めます。設定はアバターごとに保存されます。トラッキングの表情には上限をかけない(既定 ON)が ON の間は、トラッキングタブの 表情を反映 で切り替わった表情は上限なしで動きます(手動で選んだ表情・まばたき・口パク・パーフェクトシンクには上限がかかります)。

パーフェクトシンク化(パーフェクトシンク化タブ)

ARKit 名の BlendShape が無いアバターでも、顔に目印を打つとパーフェクトシンク用の 51 種類の形状を自動で作れます。元からある BlendShape(「あ」・まばたき・笑顔など)は自動で割り当てて使います。結果は新しい .vrcaster として別名で保存し、元のファイルは変更しません。

  • メッシュの頂点を読むため、2.0.0 以降の書き出しツールで書き出し直した .vrcaster が必要です(VRM は対象外)。タブ一覧の一番下にある紫色の パーフェクトシンク化 タブの 編集を始める で編集画面に移ります。編集中は出力にも顔のアップが映り、揺れもの・待機モーション・トラッキング・まばたき・口パクは止まります(閉じると元に戻ります)。
  • 1. 目印: 顔メッシュ と 細かさ(最小(約 10 点) / 標準(約 20 点) / 詳細(約 40 点))を選び、図で光っている目印を顔の上で左クリックして打ちます。ドラッグで動かせます(視点は顔の正面に固定され、ホイールで拡大・中ドラッグで移動。視点を顔の正面に固定 を外すと右ドラッグで回転)。間違えたときは図の下の 元に戻す(Ctrl+Z)で 1 つずつ戻せ、消す(Delete キー)で選択中の目印(打っていなければ直前に打った目印)を消せます。 左側の目印を右側にも反映(左右対称) が ON なら右側は自動で置かれます。「アバターの左」は正面から見て右側です(目印の名前にも「画面の右・アバターの左」のように出ます)。最小の目印(目・眉・口角・唇・あご)がそろったら 生成して試す を押します。
  • 2. 形状: 形状ごとに 自動生成 / 既存の BlendShape / なし と 強さ を選び、反映 で試します。目の動き(eyeLook)は目のボーンが視線で動くので、既定は なし です(目のボーンが無いアバターでは 自動生成)。作っても動く部分が無かった形状には 動く部分なし と出るので、既存の BlendShape か なし を選んでください。
  • このアバターに無い部位 で 眉 / 鼻 / 口の中 を選ぶと、その部位の目印は打たずに済み、その部位の形状は既定で なし になります(口の中や舌が作られていないアバターは、「あ」などの既存の BlendShape で口を動かします)。別の歯・舌のメッシュが無いアバターでは 歯・舌のメッシュも顎と一緒に動かす は選べません。存在しない部位があるアバターでは、期待どおりの動きにならない可能性があります。
  • 自動で置く の 2 つのボタンで、まだ打っていない目印を自動で置けます(打った目印は変わりません。元に戻す で取り消せます)。BlendShape から はアバターのまばたき・「あ」「う」・眉の BlendShape で動く部分から目・口・眉・鼻先を求めます。画像認識 は顔を正面に向けてから押すと、今の画面の顔を MediaPipe で認識して置きます(アニメ調の顔は見つからないことがあります)。どちらも位置は目安なので、ずれた目印はドラッグで直してください。
  • 保存する前に、2. 形状 の 実際のトラッキングで試す(保存する前に) を ON にすると、試している形状のまま自分の顔の動きで確かめられます(トラッキングタブでトラッキングと パーフェクトシンク を ON に)。形状を変えたら 反映 で更新されます。
  • 別名で保存...(既定は「元の名前_PerfectSync.vrcaster」)で保存し、保存したアバターを読み込む で開くと、トラッキングタブの パーフェクトシンク で顔が動きます。パーフェクトシンク版をもう一度編集すると、保存した目印の続きから直せます。このファイルは 2.0.0 より前の VRCast では開けません。閉じる を押すと確認が出て、保存せずに閉じる で保存していない変更を捨てて元の画面に戻ります。

Web カメラトラッキング(トラッキングタブ)

  • トラッキングを有効にする を ON にすると、同梱のトラッカーが自動で起動し、頭の向き・まばたき・口・視線(MediaPipe では腕・手も)が動きます。
  • MediaPipe で 腕・手 が ON のときは、上半身のひねり・傾き(肩)(既定は ON)で両肩の向きに合わせて上半身をひねったり左右に傾けたりします。肩が映っていない間は頭の位置で傾けます。ひねらせたくないときは 上半身のひねりを固定 を ON にすると、左右の傾きだけが動きます。生データ表示 では上半身の向きが緑の箱と角度で確認できます(骨格はアバターの大きさに合わせて描くので、カメラを動かす必要はありません)。
  • MediaPipe の 全身トラッキング(MediaPipe)(試験的・非推奨。既定は OFF)を ON にすると、全身がカメラに映っているとき腰の左右の向きと脚の曲げを合わせます。かかとと足先が映っていれば、その向きに足を合わせます。その下の 部屋を歩き回る(固定しない)(既定は OFF)を ON にすると、カメラに映った位置に合わせて動きます(最初に映った場所が開始位置。上下は動きません)。顔のアップや机に座って足が映らないときは待機ポーズのままです。生データ表示 では脚の線も確認できます。ON のあいだは 顔が見つからないときはトラッキングしない・呼吸・体の揺れ・体の動き・全身モード(足を固定) を OFF の表示にして操作できなくし、動作もしません。全身トラッキングを OFF にすると、それまでの設定に戻ります。
  • 入力元 は、縦に並んだスイッチのどれか 1 つを ON にして選びます。各行の右(幅が足りないときはスイッチの下)に推奨(MediaPipe)と PC 負荷の目安(低・中・高)が出ます。MediaPipe は 腕・手 を OFF にすると軽くなり、iPhone などから受け取る入力元は推定をスマートフォン側で行うため PC の負荷は低めです。
  • まばたきをトラッキング(既定は ON)を OFF にすると、目の開閉は追わず、顔・表情タブの自動まばたきでまばたきします(パーフェクトシンクでもまばたきだけは動かしません)。
  • 目を開けているのにアバターが半目になるときは、目の開きの補正(既定は 0)を上げます。値までの目の閉じ具合は開いた目として扱い、まばたきでは閉じ切ります(パーフェクトシンクと、表情を反映のジト目の判定にも効きます。まばたきをトラッキング が ON のときだけ出ます)。
  • まばたきや横を向いたときに意図せずウインクになる・左右の開きがばらつくときは、左右の目をそろえる(既定は なし)を選びます。常に は左右の開きを常にそろえます(まばたきはできますが、ウインクはできません)。横を向いたときだけ は顔が横を向いたときだけそろえます(パーフェクトシンクにも効きます)。
  • 閉じた目・ウインクが頭の傾きや腕と逆側になるときは、動き 欄の 顔の左右を入れ替える(既定は OFF)を ON にします。顔(まばたき・パーフェクトシンク・視線)だけが入れ替わり、頭の向きと腕は ミラー の設定のままです。
  • 顔は合っているのに腕や上半身だけ左右が逆のとき(iPhone の顔 + Web カメラの腕の併用など)は、動き 欄の 身体の左右を入れ替える(既定は OFF)を ON にします。体(腕・手・肩のひねり・傾き)だけが入れ替わり、頭の向きと顔は ミラー のままです。
  • MediaPipe・iPhone・外部アプリ(VMC)・iFacialMocap では 表情を反映 を ON にすると(既定は ON)、笑顔・驚き・怒り・悲しみ・ウインク・ジト目・ふくれっ面を検出してアバターの表情に切り替えます(割り当て先の表情が無いものは検出しません)。 表情ごとの しきい値 で反応のしやすさ(低いほど反応しやすい。生データ表示 中に出る表情の値が目安)を、表情ごとの選択で使う表情を変えられます(自動 は表情の名前から推定)。
  • MediaPipe・iPhone・外部アプリ(VMC)・iFacialMocap では パーフェクトシンク(既定は ON)にも対応しています。ARKit 名の BlendShape(eyeBlinkLeft・jawOpen・mouthSmileLeft など)を持つアバターなら、眉・頬・口の形まで顔の動きどおりに動きます。 有効にする条件 で 20 種類以上(既定)か 1 種類でも を選べ、対応しているかはその下に件数で表示されます。パーフェクトシンク中は 表情を反映 の自動切り替えは止まります(20 種類未満で動かしているときは併用します)。
  • 口・頬の動きを強調(既定は ON)では、パーフェクトシンクで顔を動かしている間だけ、カメラでは弱く出やすい ふくれっ面・口の左右・頬をふくらませる・唇 の動きを倍率(1〜5)で強めます(口の左右の倍率は既定 1 倍)。 動きが小さければ値を上げ、すぐ動きすぎるなら下げてください。MediaPipe では口の左右と頬のふくらみを顔の形から推定します。開始後の数秒は真顔にしておくと、ふだんの顔を覚えて正しく測れます。 頬のふくらみの検出 の 出し始め(%) は真顔のときの値より少し上に、最大(%) は頬をふくらませたときの値くらいにします(今の値は設定の下に表示されます)。パーフェクトシンク化の 実際のトラッキングで試す 中は、同じ設定が左側の 口・頬の調整 パネルにも出ます。変えた値はトラッキングタブへすぐ反映され、設定を保存 でファイルに残します。
  • カメラは < > で選びます。動かないときは トラッカーを再起動。
  • 入力元を iPhone・外部アプリ(VMC、顔 + 全身) にすると、カメラの代わりにスマートフォンのアプリ(iPhone の Waidayo など)や PC のアプリ(VirtualMotionCapture など)から VMC プロトコルで動きを受け取ります。 PC とスマートフォンを同じ Wi-Fi につなぎ、トラッキングタブに出る この PC の IP アドレス と UDP ポート(既定 39539)をアプリの送信先に入力してください(同じ PC で動かすアプリなら 127.0.0.1)。 初回は Windows ファイアウォールの確認が出るので、プライベートネットワークで許可してください。ARKit の値を送るアプリなら、パーフェクトシンクと表情の反映も使えます。 全身を送るアプリでは 全身(送信側アバターの動き)(既定は ON)で、腰・脚・腕・指と体全体の位置も送信側のアバターと同じように動きます。まっすぐ立ってカメラ側を向き、リセットの 顔の向き を押すと正面がそろいます。 足を床に合わせる(既定は ON)では、送信側とアバターの脚の長さの違いで足が浮いたりめり込んだりしないよう、膝の曲げで足の位置を合わせます。
  • 入力元を iFacialMocap(iPhone、顔のみ) にすると、iPhone の iFacialMocap から顔の動きを受け取ります。 PC と iPhone を同じ Wi-Fi につなぎ、iFacialMocap の画面上部に出る IP アドレスをトラッキングタブの iPhone の IP アドレス に入力してください(UDP ポート 49983 を使います)。 初回は Windows ファイアウォールの確認が出るので、プライベートネットワークで許可してください。パーフェクトシンクと表情の反映も使えます(腕・手は動きません)。
  • 入力元を iPhone(VMC)の顔 + MediaPipe の手 または iFacialMocap の顔 + MediaPipe の手 にすると、顔は iPhone(パーフェクトシンクも可)、腕・手・指は Web カメラ(MediaPipe)で動かします。 iPhone 側の設定は上と同じで、Web カメラも選んでください。iPhone からの受信が止まっている間は、顔も Web カメラで動かします(VMC の全身は使いません)。 iFacialMocap 併用中の上半身のひねりは顔の向きに追従します。腕・上半身だけ左右が逆なら 身体の左右を入れ替える を使います(頭・顔は ミラー のまま)。
  • 正面がずれたらカメラを見て、パネル下部の リセット の 顔の向き(顔・上半身・視線)を押します。視線だけなら 視線。
  • 正面は、トラッキング開始時(入力元・カメラの変更後も)に頭が 0.5 秒ほど止まったときの向きで自動で決まります。顔を手で隠すなどして見失っても、正面は取り直しません。
  • 目の動きの上限 が効かないときは、パーフェクトシンク が ON のあいだ 目の動きの BlendShape を指定する(このアバターだけ) を ON にし、上を見る・下を見る・左を見る・右を見る を一覧から選べます(検索可。空の方向は自動のまま。目のトラッキング が ボーン のときは指定したキーは動きません)。選んだキーは上限で動き、アバターごとに保存されます。
  • 体の動き で、頭の動きに合わせて上半身を傾けるか体ごと動かすかを選べます。
  • 全身を映すときは 全身モード(足を固定) を ON にすると、足を床に付けたまま、腰も上半身の傾き・移動についていき、膝の曲げで吸収します。

他のアプリ(Discord・Zoom・VSeeFace など)が Web カメラを使っていると起動できません。

設定・リセット(設定タブ)

  • 表示言語: 自動(OS に合わせる)/ English / 日本語 / 한국어 / 简体中文 / 繁體中文。パネル上部の言語ボタンでも、どのタブからでも切り替えられます。
  • UI の大きさ: 75%〜200%。
  • パネルの不透明度: 操作パネルとパーフェクトシンク化の編集画面の背景を 20%〜100% で透かせます(文字は薄くなりません)。
  • テーマ: ライト(既定)/ ダーク。背景色をグラフィックタブで変えていなければ、背景もテーマに合わせて切り替わります。
  • 設定は VRCast の終了時に自動で保存され、次回起動時に復元されます。
  • 設定プリセット: 設定をカテゴリ(動作最適化・トラッキング・出力など)ごとに選んで .vrcastpreset ファイルに書き出し(書き出す...)、別の PC や後から読み込めます(読み込む...、またはファイルをウィンドウにドロップ)。読み込むときは反映するカテゴリを選んでから 適用 を押します。アバター関連を外す で、ライト・ポーズ・表情の割り当てなどアバターごとに合わせる設定だけをまとめて外せます。アバターごとの記録(シェイプキー・カメラ・表情のキー)と、マイク・カメラ・ポートなど PC ごとの値は含みません。ファイルはテキストなので、いらないカテゴリを消して使うこともできます。

全ての設定をリセット(赤いボタン)を押し、確認で リセットする を押すと、全ての設定が初期状態に戻ります (ウィンドウサイズと最後に開いたアバターは残ります)。元に戻せません。

パフォーマンス(パフォーマンスタブ)

  • 軽量モード(既定は ON): 描画を 30fps(OFF なら 60fps)に抑え、OpenSeeFace は軽いモデルを使って、ゲームや OBS と同時に使うときの負荷を減らします。MediaPipe の重さはトラッキングタブの トラッカーの動作 で選びます。
  • 動作状況を表示(既定は ON): パネルの一番下に、描画の FPS・VRCast の CPU 使用率・GPU の処理時間・同梱トラッカーの CPU 使用率・トラッキングの受信レートを英語で表示します(1 秒ごとに更新)。重いときの原因の見当をつけるのに使えます。
  • プロセスの優先度(既定は「通常」): VRCast 本体と同梱トラッカーの優先度をまとめて変えます(すぐ反映)。ゲーム中にトラッキングがカクつくときは上げてください。「高」にすると他のアプリが重くなることがあります。
  • CPU 設定 › AMD(X3D)› 3D V-Cache の無い側のコアで動かす(既定は ON。効果があるのは 7950X3D / 9950X3D など、3D V-Cache が片方の CCD にだけある CPU だけです。この PC が対象かどうかは設定の下に表示されます): ゲーム中は Windows がアプリをゲームと同じコアに寄せるため、VRCast 本体と同梱トラッカーを反対側のコアで動かし、ゲームとコアを取り合わないようにします(すぐ反映)。VRCast 自体がゲームと判定されている場合は、Game Bar(Win + G)の設定で「これをゲームとして記憶する」をオフにしてください。
  • CPU 設定 › Intel(P コア / E コア)› 使うコア(既定は「自動」。効果があるのは P コアと E コアがある Intel の CPU(第 12 世代以降・Core Ultra)だけです): VRCast 本体と同梱トラッカーを動かすコアを選びます(すぐ反映)。E コアのみ は P コアをゲームに譲りますが、トラッキングや描画が遅くなることがあります。P コアのみ は速く動きますがゲームとコアを取り合います。迷ったら「自動」のままで大丈夫です。
  • 描画に使う GPU(既定は「自動」): 自動 / 省電力 / 高パフォーマンス、または GPU を一覧から直接選べます。VRCast を起動し直すと反映されます(VRCast を今すぐ起動し直す ボタン。PC の再起動は不要です)。OBS のキャプチャや仮想カメラを使うときは、OBS と同じ GPU にすると最も軽くなります。同梱トラッカーは CPU で動くので、この設定は関係しません。
  • NVIDIA インスタントリプレイ(NVIDIA の GPU がある PC だけ表示): NVIDIA のインスタントリプレイに検知させない を押すと、VRCast がインスタントリプレイ(ShadowPlay)にゲームとして検知されないよう、ドライバー設定に VRCast 用のプロファイルを書きます。VRCast を起動し直すと反映されます。NVIDIA のインスタントリプレイの検知を元に戻す で元に戻せます。非公式の設定のため、ドライバーによっては効きません。変更できないと表示されたときは、VRCast を管理者として実行してお試しください。

情報(情報タブ)

  • アップデート: 起動時に新しいバージョンがあるかを確認し、あればパネル上部に通知します(GitHub からダウンロード / BOOTH からダウンロード / 更新履歴を表示する(GitHub))。 確認は最新のバージョン番号を読むためだけに Web サイト(coffin299.github.io)へ接続します。OFF にもできます。 今すぐ更新 を押すと、GitHub から新しいバージョンをダウンロードしてファイルを入れ替え、VRCast が自動で起動し直します(設定はそのまま)。OBS や Discord で仮想カメラを使ったままでも更新できます。VRCast を Program Files など管理者権限の必要なフォルダに置いている場合は自動更新できないため、ダウンロードのボタンから入手してください。アバターのプロジェクトに入れた書き出しツールは自動では更新されません。お手すきの際に、zip から最新版をインポートしてください。
  • 開発者・協力者とライセンスは クレジット で確認できます。 開発者の Twitch チャンネル もここから開けます。フォローや Prime サブスクをしてくれると開発の励みになります。
  • 情報タブの下の 公式 Discord タブでは、公式 Discord に参加するボタンと、サーバーのオンライン人数・オンラインのメンバー、コピーできる招待コード(vM5RH52HdF)を表示します。一番下には、次に対応してほしい機能などを募集する アンケート があります。
  • 一番下の デバッグログ で、カメラ一覧・トラッカーの状態とログを確認できます(困ったとき)。

操作一覧

Tab 操作パネルの表示 / 非表示(隠している間は OBS で背景も透過)
パネル上部の言語ボタン 表示言語の切り替え。どのタブを開いていても押せます
パネル下部のリセット 顔の向き / 視線 / 表情(ニュートラル)/ カメラ。どのタブを開いていても押せます(ボタンの下段に割り当て中のショートカットキーを表示)
公式 Discord タブのアンケート 次に対応してほしい機能などの募集です。GitHub の Issue か Google フォーム から自由に書いてください。同じタブから 公式 Discord にも参加できます
テンキー 1〜5 リセット(1 顔の向き / 2 視線 / 3 表情 / 4 カメラ)と 5 カメラ目線の ON / OFF。パネルを隠していても使え、操作・連携 タブの ショートカットキー(リセット・カメラ目線) で変更・解除できます(NumLock ON。VRCast が背面にあるときも使う は既定 ON)。表情のショートカットキーと同じキーにすると警告が出て、表情が優先されます
右ドラッグ カメラを回転
中ドラッグ カメラを移動
ホイール ズーム
割り当てたキー 表情の切り替え / ニュートラル(顔・表情 タブで表情ごとに割り当て。既定は未割り当て)

困ったとき

アバターが暗い

グラフィック タブの 晴れ プリセットを押すか、環境光 を上げてください。 向き を 0 付近にすると正面から光が当たります。 lilToon 等は明るさがテクスチャの色までに制限されるため、太陽光を上げても一定以上は明るくなりません。 その場合は アバターの明るさ を上げてください(0.1〜10、1 = マテリアルのまま)。

OBS で背景が抜けない

VRCast の背景を 透過 にし、OBS は ゲームキャプチャ(ウィンドウキャプチャではなく)で 透過を許可 にチェックが入っているか確認してください。

OBS に何も映らない

ゲームキャプチャのウィンドウに [VRCast.exe]: VRCast を選び直してください。VRCast を最小化すると映らないことがあります。

ドラッグ&ドロップできない

VRCast を管理者として実行していると Windows の制限でドロップできません。通常どおり起動するか、ファイルを選ぶ... を使ってください。

ゲームや OBS と一緒に使うとトラッキングがカクつく

パフォーマンス タブの 軽量モード が ON になっているか確認してください(既定は ON)。MediaPipe ならトラッキングタブの トラッカーの動作 を なめらか にすると負荷が下がり、エコ にするとさらに半分ほどになります(既定の ぬるぬる(高負荷) は指をなめらかに動かすため重めです)。それでも重いときは、使わない 腕・手 のトラッキングを OFF にすると負荷が下がります。プロセスの優先度 を「通常以上」にするのも効果があります。

口パクしない

顔・表情 タブで正しいマイクが選ばれているか、音量 メーターが動くか確認し、 動かなければ マイク感度 を上げるか ノイズゲート を下げてください。

表情が変わらない

表情の反映は MediaPipe・iPhone・外部アプリ(VMC)・iFacialMocap のみ対応です。トラッキング タブで入力元がいずれかになっているか、 表情を反映 が ON か確認してください。反応しにくいときは 表情のしきい値 を下げ、 違う表情になるときは表情ごとの選択で使う表情を指定してください。

カメラが認識されない・トラッキングが動かない

まず トラッキング タブの カメラ で、お使いの Web カメラが選ばれているか確認してください。 VRCast Camera(VRCast の仮想カメラ)・OBS Virtual Camera などの仮想カメラや、顔認証用の赤外線(IR)カメラを選ぶと、映像は届いても顔が認識されません。

情報 タブの一番下の デバッグログ では、カメラ一覧・トラッカーの状態と、起動してからのログを確認できます。 WARN / ERROR だけを表示したり、カテゴリを Tracker / TrackerOutput / Tracking(カメラ関係)に絞ったりできます。 不具合を報告するときは 表示中をコピー を押して、ログと環境をそのまま貼り付けてください。

原因がわからないときは 詳細ログ を ON にして、症状が出るまで待ってからコピーしてください。 受信の統計(1 秒あたりのデータ数、顔・腕・手が映っていた割合)や MediaPipe の推定にかかる時間などが DEBUG として記録されます。 設定は保存されるため、調べ終わったら OFF に戻してください。

設定ファイル・ログの場所

%USERPROFILE%\AppData\LocalLow\VRCast\VRCast\ (settings.json と Player.log)。不具合の報告時は Player.log を添えてください。