O Open-Sora é um projeto de geração de vídeo de código aberto desenvolvido pela equipe hpcaitech, com o objetivo de permitir que qualquer pessoa gere vídeos de alta qualidade com eficiência. Seu principal objetivo é popularizar a tecnologia de criação de vídeo por meio de código aberto, reduzir o limite de uso e promover a coinovação na comunidade.
O projeto oferece duas funções principais:
- Geração de texto para vídeo: gera automaticamente vídeos dinâmicos que correspondem ao conteúdo por meio de descrições de texto
- Geração de imagem para vídeo: gere sequências de vídeo dinâmicas com base em extensões de imagens estáticas
Ao contrário de outras ferramentas comerciais de geração de vídeo, o Open-Sora divulga totalmente os pesos do modelo, o código de treinamento e o processo completo de treinamento sob a licença de código aberto MIT, o que o torna particularmente adequado para desenvolvedores, pesquisadores e profissionais criativos. A versão 2.0 mais recente foi capaz de se aproximar dos principais modelos do setor em termos de desempenho, custando apenas US$ 200.000 para ser treinada.
Essa resposta foi extraída do artigoOpen Sora: uma ferramenta de geração de vídeo de código aberto para otimizar a consistência facialO