Programa de aprimoramento de clareza em vários níveis
Os problemas de nitidez do vídeo SVLS decorrem principalmente do desfoque de movimento e da perda de resolução, e o projeto oferece três estratégias de aprimoramento:
- Seleção de modo aprimorado graduado::
--enhancer noneManutenção da resolução original para vídeo de entrada de alta qualidade--enhancer lipSuper-resolução: Aplicar a super-resolução somente à área dos lábios (configuração recomendada)--enhancer faceAprimoramento total do rosto: consome mais memória, mas com mais detalhes.
- Otimização do pré-processamentoPré-execução do vídeo de origem usando o FFmpeg
-vf scale=1920:1080,unsharp=3:3:1.0Afiação - programa de pós-tratamentoAprimoramento secundário por meio do Topaz Video AI após a geração
Os dados medidos mostram que o uso delipNo modo de aprimoramento, o indicador PSNR na área dos lábios pode ser melhorado em 5,8 dB. Para requisitos de saída 4K, recomenda-se amplificar de forma inteligente com o Real-ESRGAN após a geração de aprimoramento 1080P.
Essa resposta foi extraída do artigoSVLS: SadTalker aprimorado para gerar pessoas digitais usando vídeo de retratoO
Não pode ser reproduzido sem permissão:Ferramentas de produtividade de IA " Como melhorar a clareza visual dos vídeos humanos digitais gerados pelo SVLS?
