Vidu Q4 reference to video: um clipe a partir de muitas referências
O Vidu Q4 reference to video cria um clipe a partir de várias imagens de referência. Para quem é, prompts prontos e truques para manter os personagens iguais.
Este é o problema que ele resolve. Você tem um personagem, uma jaqueta, um lugar e um produto, cada um na sua imagem, e quer todos no mesmo plano. Um modelo de imagem para vídeo só parte de um quadro, então você teria de pintar esse quadro combinado primeiro. O Vidu Q4 Preview reference to video pula essa etapa: você entrega uma pilha de referências e um prompt, e ele constrói a cena em volta delas. O exemplo na página dele é um clipe de moda de um homem de jaqueta de couro e óculos escuros andando por um espaço industrial, o tipo de plano que normalmente exige um quadro inicial produzido.
Quem deve escolher
- Marcas e moda, em que a roupa ou o produto precisa continuar reconhecível enquanto a cena é nova.
- Séries com um personagem fixo. Use as mesmas referências de rosto e roupa em cada episódio e o personagem continua sendo a mesma pessoa.
- Quem não tem quadro inicial. Se você prefere descrever a cena a desenhá-la, este é o modelo; se já tem o quadro exato, use a versão image to video.
As entradas e para que serve cada uma
Prompt é o único campo obrigatório. Images aceita várias referências de uma vez (o campo comporta uma pilha generosa). Audios, em Advanced, aceita algumas referências de áudio para o som do clipe, além do que o Generate audio escreve sozinho. Depois vêm os controles de sempre: proporção (widescreen por padrão, mais vertical, quadrada e duas intermediárias), resolução de um teste leve até um tamanho final grande, duração em segundos inteiros, Generate audio (ligado por padrão) e uma seed.
Prompts prontos
O homem do retrato caminha em direção à câmera por um armazém de concreto, vestindo a jaqueta de couro e os óculos escuros das outras fotos. Travelling lento, luz do dia fria entrando por janelas altas, os passos ecoam.O frasco de perfume da referência está sobre pedra preta molhada, uma única gota cai na tampa, aproximação macro lenta, luz de contorno violeta suave, um zumbido grave e baixo.A garota da primeira imagem se senta no banco do trem da segunda imagem, olha pela janela e diz baixinho: "Estamos quase em casa." Chuva no vidro.Truques para manter a consistência
- Poucas referências limpas valem mais que muitas ruidosas. Uma foto do rosto em fundo liso e uma do look dizem mais que dez fotos casuais que se contradizem.
- Um sujeito por referência. Uma imagem com três pessoas deixa o modelo adivinhando de quem você está falando.
- Rascunhos na menor resolução e duração. O preço no botão Generate acompanha as duas. Quando a cena funcionar, fixe a seed e renderize o final no tamanho de que precisa.
- Mantenha o mesmo conjunto de referências em toda a série, na mesma ordem, e repita a descrição do personagem no prompt. O guia de estilo consistente fala mais sobre montar um conjunto de referências reutilizável.
A limitação honesta
Referências são orientação, não colagem. Logotipos, textos impressos na roupa e joias finas saem aproximados, e quanto mais referências você adiciona, mais cada uma é diluída. Quando um detalhe pequeno precisa ser exato, gere um quadro inicial com esse detalhe certo e use image to video. Além disso, é um modelo preview, então espere refazer uma cena mais vezes do que com um modelo maduro; o guia de modelos de vídeo ajuda a decidir quando um modelo mais estável compensa.
Perguntas
Preciso enviar imagens de referência?
Não. Só o prompt é obrigatório, então ele também funciona como texto para vídeo. Mas são as referências que fazem valer a escolha.
Para que servem as referências de áudio?
São arquivos de áudio opcionais em que o som do clipe pode se apoiar. Ficam em Advanced; sem eles, o Generate audio ainda escreve som para a cena.
Ele faz vídeo vertical?
Sim. Escolha a proporção vertical antes de rodar; o widescreen é só o padrão.
