低遅延モーションキャプチャ統合ソリューション
リアルタイムのデジタル・ヒューマン・システムの構築には注意が必要だ:
- ハードウェア構成iPhone FaceIDまたはIntel RealSenseを使用したリアルタイムモーションキャプチャー。
- データパイプラインUnityのSMPL-Xプラグインを使って、モーションキャプチャデータをLHM互換フォーマットに変換。
- 最適化戦略リアルタイムレンダリングをオフにし、スケルトンアニメーションのみにすることで、レイテンシを80ms以内に抑えることができます。
- 代替プログラムVTube Studioなどのミドルウェアブリッジを使用して、プリセットのモーションクリップを送信します。
まず30FPSでテストを行い、安定したら60FPSまで上げることをお勧めします。また、周囲温度を75℃以下に保つよう注意してください。
この答えは記事から得たものである。LHM:1枚の画像から動き対応の3D人体モデルを生成するについて