MatAnyoneは、Region Adaptive Memory Fusion技術により、優れたコヒーレントメモリ伝搬能力を実現しています。この技術は、前のフレームの特徴を自動的に記憶し、現在のフレーム処理に融合させることで、ビデオシーケンスのキーイング結果が時間次元で高いコヒーレント性を保つことを保証します。従来のフレームごとの処理と比較して、この技術はフレーム間のちらつきなどの一般的な問題を効果的に解決します。
実際には、ユーザーは最初のフレームマスクを提供するだけでよく、プログラムは自動的に後続フレームのメモリ伝搬処理を完了する。研究チームはまた、設定ファイルでmemory_fusion_rateのような調整可能なパラメータを提供しており、ユーザーは映像の特性(例えば、照明の急激な変化)に応じて効果を最適化することが簡単にできる。
この答えは記事から得たものである。MatAnyone: ターゲットポートレート指定ビデオ抽出、ターゲットポートレートビデオ生成オープンソースツールについて































