Crie um vídeo usando apenas as imagens iniciais e finais。O método prático mais econômico para geração de vídeo de IA

2Segunda imagem revisada
11ª imagem de falha
Imagem de IA do ponto inicial
Imagem de IA do ponto final

A geração de vídeos com IA está evoluindo rapidamente、Na operação real, o custo de geração torna-se um problema surpreendentemente grande.。

Principalmente na produção de vídeos para SNS.、O número de tentativas torna-se mais importante que o produto acabado.。

Não importa quão bom seja o modelo、É raro que a imagem ideal seja produzida de uma só vez.。Em vez disso, procure a direção enquanto gera várias vezes.、Será um processo de aumento gradual do grau de conclusão.。

É por isso que tenho usado muito ultimamente.、1080"Video 2.5 Turbo" permite gerar vídeos de p.5 segundos a baixo custo.。

Não é o modelo da mais alta qualidade。

No entanto, tem qualidade suficiente para postagem em SNS e vídeos curtos.、Acima de tudo, os custos de produção podem ser reduzidos significativamente.。

Na produção de vídeo de IA, muitas vezes é mais importante poder tentar de novo e de novo do que acertar de uma só vez.。

Em outras palavras、Na produção de vídeo de IA, o número de tentativas pode determinar a qualidade do trabalho e não o desempenho.。

Se você pensa assim、Este modelo de baixo preço é muito bom.、tornar-se uma opção realista。

E、O que considero particularmente prático neste modelo rentável é、Esta é a geração de vídeo que especifica as imagens de "ponto inicial" e "ponto final".。

Geração de vídeo que faz a IA pensar no processo

Este método é muito simples。

・Especifique a primeira imagem (ponto inicial) do vídeo

・Especifique a última imagem (ponto final) do vídeo

・Deixe a IA preencher as lacunas

Isso é tudo que há para fazer。

Para produção de vídeo tradicional、Os humanos tiveram que projetar o trabalho da câmera e o movimento do sujeito do início ao fim.。

No entanto, no caso do vídeo AI、Basta fornecer os pontos inicial e final、A IA irá inferir e gerar a história e os movimentos durante esse período.。

Esta é uma ideia completamente diferente da produção de vídeo tradicional.、Pode-se dizer que este é um método de produção exclusivo da IA.。

Imagem do ponto inicial e imagem do ponto final usadas desta vez

A imagem usada desta vez não é uma ação ao vivo、Ambas são imagens geradas por IA。

Primeiro, gere uma imagem que mostre todo o corpo.、Depois disso, foi gerada uma imagem em close do rosto.。

Em outras palavras、

“Uma pessoa está caminhando em minha direção.”

A imagem do ponto de partida é、

"Close-up de uma pessoa"

Eu preparei uma imagem de ponto final chamada。

Insira essas duas imagens no modelo de vídeo、A IA considera automaticamente os movimentos entre。

venha andando。

aproxime-se gradualmente da câmera。

pare em algum lugar。

fica para cima。

A IA cria automaticamente essa série de fluxos.。

Claro, não funciona exatamente como eu pretendia.。

mas、Muitas vezes monta imagens naturais sem instruções humanas detalhadas.。

Na verdade, a IA está fazendo um trabalho de câmera bastante irracional.

Este vídeo é bastante difícil de filmar.。

o assunto está andando。

A câmera também está se movendo。

Além disso, há uma transição de uma imagem puxada para baixo para um close-up.。

Em alguns casos, a fotografia do gimbal ou dolly pode ser necessária.。

Gestão de distância ao assunto。

gerenciamento de foco。

Velocidade de movimento da câmera。

Sincronização com velocidade de caminhada。

Todos estes elementos devem ser cumpridos。

Acho que não será uma filmagem fácil, mesmo para cineastas experientes.。

No entanto, a IA não entende processos de filmagem tão complexos.。

Basta olhar para os pontos inicial e final、Isso apenas preenche a lacuna。

no entanto、Cria um trabalho de câmera que parece ter sido realmente filmado por um humano。

É aqui que reside a diversão do vídeo de IA.。

Em vez de recriar a tecnologia、Como resultado, imagens semelhantes a essas são geradas.。

Eu falhei na primeira vez

No entanto, ocorreu uma falha durante a primeira geração.。

Minha fantasia mudou。

A representação do cabelo também era instável.。

Este é um fenômeno muito comum em vídeos de pessoas.。

Especialmente como desta vez、

・Grande quantidade de movimento

- Grande mudança no ângulo de visão

・Passe do corpo inteiro para o close-up

Quando condições como、Maior dificuldade em manter a consistência。

A IA não entende as próprias pessoas。

Portanto, o formato das roupas e do penteado podem mudar durante o processo.。

Minha política básica é deixar isso primeiro para a IA.

O método que uso em situações como esta é simples。

Primeiro, crie uma imagem de ponto inicial e uma imagem de ponto final que possa ser usada pela IA.。

Depois disso, nenhum controle detalhado、Deixe para a IA uma vez。

Veja os resultados primeiro。

Contrate se for bom。

Se não funcionar, conserte。

Este é o fluxo。

Não tente controlá-lo escrevendo vários prompts desde o início。

porque、Isso ocorre porque a IA às vezes pode produzir bons resultados que os humanos não esperariam.。

Verifique suas habilidades primeiro。

Em seguida, conserte apenas as peças que faltam。

Isso é um pouco semelhante ao retoque de fotos.。

Não toque apenas nos detalhes desde o início、É como olhar tudo e ajustar apenas as partes necessárias.。

O que foi interessante foi、A IA fez um gesto onde se vira e olha para o lado.。

Foi um movimento que um humano gostaria de adicionar como parte da performance.、Desta vez não usei porque queria mostrar um fluxo simples para a imagem final.。

5No curto espaço de segundos、Em vez de apresentar uma peça que mova o olhar ou olhe para trás.、Achei que o vídeo ficaria mais coeso se a quantidade de informações se concentrasse no movimento do sujeito e no trabalho da câmera.。

Eles também apresentam “propostas inesperadas, mas atraentes” em torno deste ponto.、Acho que esta é uma parte interessante dos vídeos de IA.。

Este prompt de modificação

O prompt de correção que adicionamos desta vez é muito curto.。

``Com movimentos naturais、Para evitar corrupção de imagem。Tenha cuidado com a representação de roupas e cabelos.''

Isso é tudo。

Não escrevi um prompt longo.。

Porém, na segunda geração, foi bastante melhorado.。

Prompts de texto longos nem sempre são vantajosos em vídeos de IA。

Na verdade, muitas vezes é melhor comunicar claramente apenas o problema.。

Desta vez também foi um exemplo típico.。

Deixe o áudio seguir seu curso

O áudio é basicamente deixado para a IA.。

Claro, você também pode adicionar efeitos sonoros posteriormente.。

Você também pode adicionar música de fundo。

Mas primeiro, vamos verificar o som gerado。

Desta vez, na segunda versão revisada, sons ambientais como o som das ondas foram gerados naturalmente.。

Também correu bem com o vídeo。

Portanto, desta vez estamos usando como está.。

Nos vídeos de IA, a coincidência não só das imagens, mas também dos sons é interessante.。

Sons e atmosfera ambientais não intencionais às vezes podem aumentar o apelo de uma obra.。

O número de testes é importante em vídeos de IA

O que senti novamente desta vez foi、O que é importante na produção de vídeo de IA não é o prompt perfeito, mas o número de tentativas.。

Decida os pontos inicial e final。

primeiro gerar。

Ver resultados。

Corrija quaisquer problemas。

gerar novamente。

Esta repetição é a mais eficiente。

Principalmente se for um modelo de baixo custo, você pode experimentar quantas vezes quiser.。

O vídeo AI vem de uma época em que os humanos projetavam os detalhes.、Podemos estar caminhando para uma era em que os humanos decidem a direção e deixam a IA interpretá-la.。

forneça apenas os pontos inicial e final、Deixe a IA imaginar o tempo。

Sinto que este método se tornará ainda mais prático no futuro.。

▶︎[Fluxo de trabalho de produção em câmera lenta de 60fps que resolve o problema de 30fps do vídeo AI com o Premiere Pro]