O sistema de máscara de movimento do ToonComposer é a principal competência que o diferencia de ferramentas de IA semelhantes. Esse recurso permite que os usuários marquem detalhes localizados (por exemplo, cabelos, bainhas etc.) que precisam ser aprimorados dinamicamente aplicando áreas pretas, que são direcionadas pelo modelo para aumentar a magnitude do movimento e a frequência da mudança. Na prática, isso traz três vantagens significativas:
- Alternativa de simulação físicaEfeitos naturais de vibração sem a necessidade de um mecanismo de física complexo.
- Controle criativoSe o braço direito do personagem é designado como tendo um balanço maior do que o braço esquerdo, então o braço direito do personagem é designado como tendo um balanço maior do que o braço esquerdo.
- Economia de recursosDinâmica sutil: dinâmicas sutis que, de outra forma, seriam desenhadas à mão quadro a quadro, agora são geradas por meio de IA!
Em um nível técnico, essa funcionalidade é implementada por meio de um mecanismo de atenção residual, em que o modelo aplica um fator de reforço de 3 a 5 vezes aos vetores de movimento das regiões rotuladas. Exemplos típicos incluem a animação live2D do VTuber, que gera automaticamente uma vibração sutil fisicamente correta rotulando apenas as pontas dos cabelos e as áreas das roupas.
Essa resposta foi extraída do artigoToonComposer: ferramenta de geração de IA para simplificar a produção de animação de desenhos animadosO