Estreia da Runway Aleph: a segunda metade da geração de vídeos, passando da "criação" para a "edição"

Em 25 de julho de EST, a AI Video, Inc., foi a primeira empresa a se tornar uma empresa de vídeo. Passarela divulgou os resultados de sua pesquisa mais recente -Runway AlephA tecnologia da empresa é uma nova e empolgante adição ao seu portfólio de produtos. Ao contrário de seu antecessor e de seus concorrentes, que geralmente se concentravam em recursos de geração de "texto para vídeo".Aleph Definido como um "modelo de vídeo no contexto", ele muda o foco da criação de vídeo do nada para uma compreensão mais profunda e uma transformação editorial do conteúdo de vídeo existente.

A mudança, que marca o início da OpenAI Sora e Racer Kling Depois que modelos como esses elevaram a qualidade da geração de vídeo a novos patamares, os principais jogadores começaram a explorar o próximo campo de batalha central da geração de vídeo: controlabilidade e pós-edição.

O que é "consciência de contexto"?

No passado, a principal tarefa das ferramentas de vídeo com IA era criar um vídeo totalmente novo com base em um prompt de texto. Em vez disso Runway Aleph A principal diferença está em sua capacidade de "ler" os elementos internos, as cenas e o contexto de um vídeo recebido e fazer modificações precisas e complexas com base neles.

É mais como uma "pós-produção" de vídeo inteligente do que apenas uma "filmagem". De acordo com a demonstração oficial lançada pela RunwayAleph A capacidade de fazer isso está principalmente nas seguintes áreas:

• Gerar novas posições e perspectivas de câmera

  Os usuários podem inserir uma parte de uma filmagem de vídeo existente e, por meio de comandos de texto simples, como "Gerar uma tomada média" ou "Filmar de um ângulo baixo", o modelo pode criar novos ângulos de câmera que não existem na filmagem original. Para a produção de filmes e televisão, isso significa que uma linguagem de câmera rica e tomadas adicionais podem ser obtidas a um custo menor.

  Comando: "Generate a medium-range full shot" (Gerar um tiro completo de médio alcance)

• Continuação perfeita da história

  Aleph A capacidade de entender o conteúdo e a dinâmica do último quadro do vídeo e gerar um próximo segmento de filmagem logicamente coerente permite uma continuação perfeita da história.

  Comando: "Generate next shot" (Gerar próximo tiro)

• Migração de estilo arbitrário

  Aplique o estilo artístico de qualquer imagem ou vídeo ao vídeo de destino para obter uma transformação estética geral. Esse recurso em si não é novo, mas Aleph O ponto forte está em sua alta retenção de conteúdo e dinâmica.

  Comando: "Convert the style of the video" (Converter o estilo do vídeo)

• Modificação de elementos ambientais

  isto é Aleph Um dos recursos mais perturbadores. Ele permite que os usuários façam alterações drásticas no ambiente de um vídeo, como mudar o clima (adicionando chuva ou neve), a hora do dia (do dia para a noite) ou o local, mantendo a dinâmica e a estrutura do objeto em questão essencialmente inalteradas. Esse recurso reduzirá significativamente o nível dos efeitos visuais (VFX).

  Comando: "Increase rain effect" (Aumentar o efeito da chuva).

Mudança estratégica de "geração" para "edição"

Runway Como uma das primeiras empresas a comercializar uma ferramenta de geração de vídeo com IA, a partir do Gen-1 A conversão de vídeo para vídeo para Gen-2 de geração de texto para vídeo vem definindo o ritmo do mercado. No entanto, com o Sora responder cantando Kling O circuito puramente "generativo" ficou muito concorrido, pois mostrou uma capacidade incrível em termos de tempo de geração, resolução e consistência física.

Aleph O lançamento pode ser visto como o Runway Em vez de participar de uma corrida armamentista com os gigantes em termos de "qualidade de geração", deveríamos encontrar outra maneira de usar nosso acúmulo no campo de ferramentas criativas para entrar no mercado de edição e composição "pós-geração". Esse mercado dá mais atenção à praticidade, à capacidade de controle e à integração do fluxo de trabalho, que é o principal problema dos criadores profissionais.

Runway Aleph A ideia não é mais permitir que a IA se torne um criador descartável de "caixas pretas", mas posicioná-la como um assistente inteligente que pode interagir repetidamente com criadores humanos e modificá-la iterativamente. Esse modelo de "colaboração homem-máquina" pode estar mais próximo da realidade atual do trabalho criativo do que a busca pela geração totalmente automatizada.

De acordo com informações oficiais.Runway Aleph estará disponível primeiro para clientes corporativos e parceiros criativos, antes de expandir gradualmente para todos os usuários. Isso dá continuidade à Runway estratégia consistente de priorizar os mercados profissionais e comerciais a serem atendidos, trabalhando com os Lionsgate e outros para aprimorar o valor do produto em fluxos de trabalho reais.