DiffPortrait360のコアテクノロジーの利点
DiffPortrait360 は、肖像画の 3D 再構築の分野における大きなブレークスルーとなります。1)ControlNetとNeural Radiation Fields(NeRF)の初の組み合わせ、2)ユニークなデュアルアピアランスモジュールの開発、3)実際の人間、様式化された画像、擬人化されたキャラクターの統一された処理の達成。複数のアングル写真や深度情報を必要とする従来の3D再構築手法と比べ、この技術は1枚の正面写真だけで360度ビューを生成できるため、モデリング時間を数時間から数分に短縮できる。
測定された性能によると、この技術はオリジナル画像の髪型、アクセサリー、その他の詳細な特徴を完全に保持することができ、Pexelsテストデータセットでは、同一性類似度が94.3%、視点一貫性スコアが91.7%となり、同時期のソリューションPanoHeadや3D-GANを大幅に上回っています。オープンソースコミュニティのデータによると、生成されたNeRFモデルはRTXで25fpsでリアルタイムレンダリング可能オープンソースコミュニティのデータによると、生成されたNeRFモデルは、RTX 6000グラフィックカード上で25fpsのリアルタイムレンダリングが可能であり、産業グレードのアプリケーションのニーズを完全に満たしています。
この答えは記事から得たものである。DiffPortrait360: 1枚のポートレートから360度のヘッドビューを生成について