Realização da engenharia de manutenção de consistência
O Dual Appearance Module é uma tecnologia patenteada do DiffPortrait360, que resolve os problemas de "desfoque" e "desalinhamento de recursos" na geração da visualização traseira por meio do mecanismo de atenção cruzada e do mapeamento do espaço de recursos. A implementação consiste em dois componentes principais: 1) um alinhador de recursos de visão cruzada baseado em ViT, que garante que os penteados, acessórios e outros elementos permaneçam geometricamente coerentes durante a rotação; e 2) uma rede de migração de textura em várias escalas, que projeta com precisão os detalhes frontais em outros ângulos.
Os dados experimentais mostram que o módulo pode controlar a diferença das características do rosto entre as visualizações dentro de 3,2 unidades LIPIS (índice de avaliação padrão do setor), em comparação com o método tradicional de passagem única para melhorar o 67%. No conjunto de testes da Pexels, amostras de teste de óculos mostram que a tecnologia pode lidar corretamente com a deformação da perspectiva da armação, para manter a transição natural do efeito reflexivo da lente. Em particular, os desenvolvedores destacam que o módulo pode ser adaptado a diferentes estilos de arte por meio do ajuste dinâmico de peso, desde a renderização ultrarrealista até a de desenho animado, mantendo um estilo consistente.
Essa resposta foi extraída do artigoDiffPortrait360: gere visualizações de cabeça em 360 graus a partir de um único retratoO