技術的原理の説明
CanonSwapのフェイシャルアニメーション機能は、基本的に動き情報の逆適用であり、静的情報の補完の問題を突破する必要がある。
ステップ・バイ・ステップ・プログラム
- 三次元顔面再建3DDFA_V2を用いた写真からの奥行き情報予測による変形可能メッシュの構築
- モーション・パラメーター・マイグレーション駆動映像のFLAMEモデルパラメータをソースフェーストポロジーにマッピングする。
- ディテール強化GANネットワークを介して細孔レベルの動的な詳細を生成する。
主なヒント
必要な手順:1) 表情がニュートラルな正面顔の写真を用意する 2) -animation_mode で開始する 3) Attention-Enhanced モジュールを目に個別に適用する。笑顔のような大きな表情は、写真の口閉じが≧70%であることを確認する必要があり、そうでない場合は68の特徴点を手動でラベル付けする必要があることに注意してください。
この答えは記事から得たものである。CanonSwap:ビデオで忠実度の高い顔の入れ替えを実現するツールについて