ビデオ・フルエンシー最適化ソリューション
Open-Soraの映像の遅延やコマ飛びの問題は、以下の方法で改善できます:
- ハードウェアアクセラレーション設定xformers (version 0.0.27.post2)とflash-attnアクセラレーション・ライブラリが正しくインストールされていることを確認してください!
- キーフレームパラメータの最適化NTSC標準のフレームレートを維持するために、generateコマンドに-fps 24 -num-frames 97(原則4k+1)を追加する。
- マルチGPUコラボレーション768pxのビデオは8GPUを並列に使用する必要がある(torchrun -nproc_per_node 8)。
- モーション補正のヒント速い動きのシーンでは、モーションスコアを5~6に上げ、"smooth panning "のようなモーションディスクリプタを追加してください。
- 後処理プログラムffmpeg -i input.mp4 -vf "minterpolate=fps=60" output.mp4。
この答えは記事から得たものである。Open Sora:顔の一貫性を最適化するオープンソースのビデオ生成ツールについて