ComfyUI-AniSora: Gere diversos vídeos no estilo anime com um clique

O ComfyUI-AniSora é uma ferramenta de geração de vídeo de anime de código aberto integrada ao ComfyUI plataforma. Com o modelo Index-AniSora como seu núcleo, ela é capaz de gerar conteúdo de vídeo em uma variedade de estilos de anime com um único clique. Os usuários podem criar vídeos em uma variedade de estilos, incluindo episódios de anime, animação original nacional, adaptações de mangá, vídeos VTuber, promoções de anime e vídeos de paródia engraçados, por meio de operações simples. A ferramenta é adequada para fãs de anime, criadores de conteúdo e desenvolvedores. Sua natureza de código aberto permite que os usuários acessem o código gratuitamente e o personalizem de acordo com suas necessidades. É fácil de instalar e funciona com o ambiente ComfyUI e os pesos do modelo AniSoraV2. A ferramenta oferece suporte à geração rápida de vídeos de alta qualidade, é intuitiva e adequada a uma variedade de cenários criativos.

Lista de funções

• Gere vários vídeos no estilo anime com um clique, incluindo episódios de anime, animação original nacional, adaptações de mangá e muito mais.
• Oferece suporte à produção de vídeos VTuber e promoções de anime (PV) para atender às necessidades de âncoras virtuais e promoções.
• Oferece a geração de vídeos de paródias engraçadas (animação fantasma), adequados para a criação de conteúdo de entretenimento.
• Gerar vídeos de animação de alta qualidade com base no modelo Index-AniSora.
• Código-fonte aberto, os usuários são livres para modificar e estender a função.
• A plataforma integrada ComfyUI, com sua interface intuitiva, é adequada tanto para iniciantes quanto para usuários profissionais.

Usando a Ajuda

Processo de instalação

Para usar o ComfyUI-AniSora, os usuários precisam primeiro preparar o ambiente do ComfyUI e instalar as dependências relevantes. Abaixo estão as etapas detalhadas de instalação:

1. Instalar a ComfyUI
   Certifique-se de ter o ComfyUI instalado em seu computador. Caso contrário, você pode clonar o código do repositório oficial do ComfyUI no GitHub (https://github.com/comfyanonymous/ComfyUI) e seguir as instruções para concluir a instalação. O ComfyUI é uma ferramenta de fluxo de trabalho baseada em Python. O ComfyUI é uma ferramenta de fluxo de trabalho baseada em Python, sendo recomendado o Python 3.8 ou superior.
2. Clone ComfyUI-AniSora Warehouse
   Abra um terminal e acesse a seção custom_nodes e, em seguida, clone o repositório ComfyUI-AniSora:

   cd ComfyUI/custom_nodes
   git clone https://github.com/Yuan-ManX/ComfyUI-AniSora.git
   

3. Instalação de dependências
   Vá para o diretório clonado do ComfyUI-AniSora e instale as dependências necessárias:

   cd ComfyUI-AniSora
   pip install -r req-fastvideo.txt
   pip install -r requirements.txt
   pip install -e .
   

   Esses comandos instalam as bibliotecas Python associadas à geração de vídeo e garantem que a ferramenta funcione corretamente.

4. Baixar os pesos do modelo AniSoraV2
   O ComfyUI-AniSora requer os pesos do modelo AniSoraV2 para gerar vídeos. Os usuários precisam visitar a plataforma Hugging Face (o link está na descrição do repositório do GitHub) para fazer o download dos pesos do modelo. Após o download, coloque o arquivo de pesos no diretório de modelos da ComfyUI (geralmente o diretório ComfyUI/models). Certifique-se de que o nome e o caminho do arquivo correspondam aos requisitos de configuração do ComfyUI-AniSora.
5. Iniciar o ComfyUI
   Após a conclusão da instalação, inicie o ComfyUI. Na interface do ComfyUI, você verá que os nós do ComfyUI-AniSora estão integrados ao fluxo de trabalho.

Uso

ComfyUI-AniSora Com a operação de fluxo de trabalho baseada em nós da ComfyUI, os usuários podem arrastar e soltar nós para criar o processo de geração de vídeo. Abaixo estão as etapas de operação detalhadas das principais funções:

1. Criar vídeos no estilo anime
   • Abra a interface do ComfyUI e localize o nó relacionado ao ComfyUI-AniSora (geralmente começa com "AniSora") na biblioteca de nós.
   • Adicione o nó do modelo AniSoraV2 e carregue os pesos do modelo baixado.
   • Configure os parâmetros de entrada, como estilo de vídeo (episódio de anime, adaptação de mangá etc.), resolução, taxa de quadros etc. O usuário pode descrever a imagem desejada com um prompt de texto, por exemplo, "uma jovem em um quimono sob uma cerejeira em flor".
   • Conecte o nó de geração e clique em "Run" (Executar) para gerar o vídeo. O tempo de geração depende do desempenho do hardware e da duração do vídeo.
2. Gerar vídeo VTuber
   • Escolha um modelo predefinido no estilo VTuber (se disponível) ou insira manualmente um prompt que descreva a imagem do âncora virtual, por exemplo, "Âncora virtual com cabelo azul curto falando ao vivo no ar".
   • Pode ser combinado com nós de entrada de áudio para adicionar narração ou música de fundo para aprimorar o efeito do vídeo.
   • Visualize os resultados gerados, ajuste os parâmetros e gere novamente até ficar satisfeito.
3. Criação de vídeos engraçados de paródias (animação fantasma)
   • No prompt, digite um elemento engraçado ou uma descrição do objeto a ser imitado, por exemplo, "personagem de desenho animado repete movimentos de dança".
   • Use os nós de loop para controlar o número de vezes que um videoclipe é repetido, gerando um efeito engraçado de reprodução em loop.
   • Depois de exportar o vídeo, ele pode ser editado com outras ferramentas.
4. Personalização
   • Os usuários podem modificar o código do ComfyUI-AniSora para adicionar novos recursos, como suporte a mais estilos ou otimização da velocidade de geração.
   • no repositório do GitHub issues talvez pull requests onde os usuários podem ver as atualizações das contribuições da comunidade ou sugerir melhorias.

advertência

• Requisitos de hardwareGPUs de alto desempenho são necessárias para gerar vídeo de alta qualidade, e as placas de vídeo NVIDIA são recomendadas para acelerar o processamento.
• peso do modeloVerifique se a versão do AniSoraV2 weights baixada do Hugging Face é compatível com o ComfyUI-AniSora.
• ajustar os componentes durante o testeSe a geração falhar, verifique o arquivo de registro para confirmar se as dependências estão instaladas corretamente ou se os pesos do modelo foram carregados corretamente.
• Suporte à comunidadeProblemas podem ser encontrados nos repositórios do GitHub em issues para fazer perguntas, a comunidade é mais ativa e geralmente recebe uma resposta rápida.

Com essas etapas, os usuários podem começar a usar facilmente o ComfyUI-AniSora e gerar rapidamente vídeos de anime de alta qualidade. A operação baseada em nós da ferramenta permite que até mesmo os iniciantes comecem a trabalhar rapidamente, enquanto o recurso de código aberto oferece mais possibilidades para os desenvolvedores.

cenário do aplicativo

1. Criação de conteúdo de anime e mangá
   Os fãs de anime podem usar a ComfyUI-AniSora para criar curtas animados originais, como um vídeo de história de aventura no estilo fantasia. Os usuários só precisam inserir uma descrição da cena, e a ferramenta gera um videoclipe que se encaixa no estilo anime e é adequado para compartilhamento em plataformas de mídia social.
2. Produção de vídeo VTuber
   Os âncoras virtuais podem usar a ferramenta para gerar rapidamente planos de fundo ao vivo ou vídeos com imagens em movimento. Por exemplo, gere uma animação de abertura de um âncora virtual em um fundo de cidade de ficção científica para aprimorar a sensação profissional do conteúdo ao vivo.
3. Vídeo de adaptação do mangá
   Os autores de histórias em quadrinhos podem converter histórias em quadrinhos estáticas em vídeos dinâmicos. Por exemplo, as principais cenas da história em quadrinhos são inseridas em pistas para gerar cenas de batalha dinâmicas para aprimorar a expressão da obra.
4. Criação de vídeos engraçados
   Os criadores de conteúdo podem produzir vídeos de paródia engraçados (animação fantasma), por exemplo, combinando terriers populares com estilo anime para gerar clipes engraçados em looping para atrair a atenção dos espectadores.

QA

1. O ComfyUI-AniSora é gratuito?
   Sim, o ComfyUI-AniSora é uma ferramenta de código aberto e os usuários podem baixar o código e as instruções de uso do GitHub gratuitamente. No entanto, você precisa preparar o ambiente ComfyUI e os pesos do modelo AniSoraV2 por conta própria.
2. Que hardware é necessário para executá-lo?
   Recomenda-se um computador com uma GPU NVIDIA com pelo menos 8 GB de memória de vídeo para garantir a eficiência na geração de vídeo.
3. Como faço para corrigir uma falha no carregamento de peso do modelo?
   Verifique se o caminho para o arquivo de pesos está correto e se você baixou a versão correta do AniSoraV2. Se isso ainda falhar, você poderá encontrar a versão correta do AniSoraV2 no GitHub issues Página para pesquisar uma solução ou fazer uma pergunta.
4. É possível gerar vídeos que não sejam do estilo anime?
   O ComfyUI-AniSora é voltado principalmente para vídeos no estilo anime. Se você precisar de outros estilos, precisará modificar o código ou usar outros plug-ins do ComfyUI.