主な検討事項::
ハードウェア制限
- ビデオメモリが不足すると、生成が中断されることがある:
- 32fpsシーケンスには≥30GBのビデオメモリが必要
- フルNeRFは80GB以上必要 - Linuxが必要で、WindowsはWSL上で動作する。
入力条件
- 画像解像度≧512pxを推奨、低解像度の入力は細部が欠落する。
- 極端な照明条件(強い逆光など)は、裏面生成の品質に影響を与える可能性がある
- 非顔面領域が過剰に表現されている場合、ROIを手動で調整する
機能的境界
- 現在のバージョンは頭部のみの生成に対応しており、全身モデルは他のツールを使用する必要がある。
- ダイナミックな表情変化には、追加のタイミング制御モジュールが必要
- トレーニングコードはまだ公開されておらず、事前にトレーニングされたモデルを推論するためにのみ使用できる。
カスタム画像を処理する前に、プロジェクトに同梱されている Pexels のテストデータで初めて処理を検証することをお勧めします。ビデオメモリの問題が発生した場合は--num_framesパラメータ値。
この答えは記事から得たものである。DiffPortrait360: 1枚のポートレートから360度のヘッドビューを生成について































