Análise da tecnologia de processamento de filmes
A implementação desse recurso se baseia em uma arquitetura técnica de três camadas:
- análise em nível de estruturaDecompor o vídeo em 25 quadros consecutivos por segundo, aplicando o algoritmo de detecção de faces quadro a quadro (possivelmente usando uma rede MTCNN)
- Compensação de movimentoRastreamento de trajetórias de movimento dos músculos faciais pelo método de fluxo óptico para garantir que o rosto substituído mantenha as alterações de microexpressão no vídeo original
- fusão dinâmica
O sistema pode atingir uma precisão de correspondência de pontos de características faciais de 94,7% em arquivos de vídeo de até 6 MB. O processamento pulará de forma inteligente os quadros desfocados (como o desfoque dinâmico causado pelo giro rápido da cabeça) e solicitará que o usuário selecione um alvo de substituição específico quando uma cena com várias pessoas for detectada. O vídeo de saída mantém o formato de codificação original e oferece suporte à reprodução suave de 60 FPS com resolução de 720P, o que atende aos requisitos de publicação de plataformas de vídeo curto, como a Jittery.
Essa resposta foi extraída do artigoAI Face Swap: Substituição gratuita de faces de IA, troca de faces de vídeo, ferramenta de troca de faces para vários jogadoresO
