O BoomCut é possível graças ao sistema patenteadoTecnologia Lip DriveObtenha sincronização da boca com inclusão específica:
- Modelagem fonético-oralA IA analisa os padrões de movimento dos músculos labiais em cada quadro do vídeo original
- alinhamento de fonemasDivisão do novo dub traduzido em unidades fonêmicas específicas do idioma (por exemplo, 44 fonemas para o inglês)
- renderização dinâmica (computação)Geração de animações faciais correspondentes com base em sequências de fonemas, ajustando 32 parâmetros principais, como abertura e fechamento da mandíbula, posição da boca etc.
Os usuários só precisam marcar a opção "Lip-sync Driver", e o sistema concluirá automaticamente o processo acima para fazer com que a dublagem em idioma estrangeiro se pareça com o efeito da interpretação de voz original do ator.
Essa resposta foi extraída do artigoBoomCut: ferramenta de geração de vídeos de marketing com IA e suporte para tradução e localização de vídeosO