パーフェクトシンクであそぼう!
<概要>
1.パーフェクトシンクとは
これをVRMモデルで手軽に使えるようにしたしくみが「パーフェクトシンク」です。
モデルのBlendShapeに手を加えることなく、パラメータ編集のみで表情を調整できるのが特徴です。
iPhoneフェイストラッキング向けのBlendShapeカスタマイズ
— はいぬっか (@hinzka) June 8, 2020
VRoid標準モーフからのレシピ集をつくってます モデルもいっしょに配布したい#VRoid pic.twitter.com/GLpEJpfDeA
破綻ほぼなくなったとおもいます かわいいよ pic.twitter.com/t5N3J6AIDV
— はいぬっか (@hinzka) 2021年3月20日
VRoidサンプルモデルAちゃん #vear
— はいぬっか (@hinzka) 2021年7月1日
iPhoneいっこで撮ったパーフェクトシンクおうた動画だよ
この一年の成果をみてほしい〜〜 pic.twitter.com/ecVNMZhhFi
■対応機種リスト 2021年11月現在
iPhone X ※A11チップのため動作が安定しないようです(vearは2020年末でiPhoneXのサポートを終了)
iPhone SE (2nd generation) ※iOS14以降
・iPad
iPad Pro 12.9-inch (4th generation)
iPad Pro 12.9-inch (3rd generation)
iPad Pro 11-inch (2nd generation)
iPad Pro 11-inch (1st generation)
iPad mini (5th generation)※iOS14以降
iPad Air (3rd generation)※iOS14以降
iPad Air (4th generation)※iOS14以降
iPad (8th generation)※iOS14以降
2.パーフェクトシンク対応モデル
2-1.要件
2-2.サンプルモデル
VRoidのデフォルトキャラクターを改変し、パーフェクトシンクに対応させたVRMモデルです。自由に利用できるサンプルとしてGitHubにて配布しています。
VRoid Hubにもモデルを公開しています。ハート♡をつけておくと、VRoid Hub連携によりvear等ですぐに動かすことができます。
2-3.雛形からのBlendShapeコピー
BlendShapeコピーツール
FaceForge について (3tene使い方サイト)
Blenderで編集済のモデルへのBlendShapeコピーについて
しかし、「VRoid Studioから出力後、アクセサリー追加などBlender・Unityで編集済」という場合、メッシュの頂点オーダーが変わってしまうため、BlendShapeのコピーに失敗してしまいます(動かすと形状が崩れる)。
HANA_Toolに含まれるBuildCopy機能を使うと、メッシュの頂点オーダーがずれた場合でも力づく紐づけつつコピーすることができます。Blenderでの作業を経由する方には必須ともいえる強力なツールです。
3.パーフェクトシンク対応アプリ
VRMのしくみで動くアプリのリストです
対応アプリ増えてくれると嬉しいです どうぞよろしくよろしくおねがいします!
3-1.iOS単体アプリ
VRoid hubで配布中のサンプルモデル(前述)に♡をつけておくと、VRoid hub連携ですぐに利用できます。
vear
※プレミアムモード機能
Emosign
waidayo
3-2.PC併用アプリ
VMagicMirror
※iFacialMocap(iOSアプリ)と連携した外部トラッキング機能(Ex.Tracker機能)
waidayo
3tene PRO V2
フェイストラッキング アプリ 3teneFTと連携した高精細フェーストラッキング
Luppetluppet.appspot.com
※iFacialMocap(iOSアプリ)と連携した外部トラッキング機能
VirtualMotionCapture
全身モーションキャプチャーツール ※VMCプロトコルによるWaidayo連携機能
Oredayo4V
VMCプロトコルによるWaidayo連携アプリ Mac版あり
VSeeFace