Da reconstrução de expressão estática à dinâmica
Além da função básica de troca de rosto, o Sistema de Animação Facial da CanonSwap transforma fotos estáticas em expressões vívidas e dinâmicas. Esse recurso baseia-se em sua exclusiva arquitetura de processamento de informações de movimento, que extrai padrões de movimento de grupos musculares de expressão de vídeos de referência e os mapeia para o rosto alvo com alta precisão.
Em termos de implementação técnica, o sistema primeiro resolve as trajetórias de movimento de 104 pontos de características faciais no vídeo de origem por meio de modelos de deformação 3D e, em seguida, usa a transformação não rígida para transferir esses padrões de movimento para o rosto de destino. Os testes mostraram que até mesmo fotos antigas de 20 anos atrás podem ser usadas para gerar animações de expressão que combinam perfeitamente com vídeos 4K contemporâneos por meio dessa tecnologia, e a precisão da sincronização da boca pode chegar a mais de 97%. Esse recurso inovador abre novas possibilidades para aplicações como preservação de patrimônio digital e desenvolvimento de assistentes virtuais.
Essa resposta foi extraída do artigoCanonSwap: uma ferramenta para obter troca de faces de alta fidelidade em vídeoO
