Retirado do X do: @PJaccetturo

Se você quer saber quais ferramentas usei para criar isso, aqui está uma visão geral rápida:

Usei o @Magnific_AI para os personagens base e milhares de gerações no @midjourney para as cenas. O trailer tem cerca de 50 tomadas, e cada uma custou entre $10 e $20 dólares em créditos no @Kling_ai para ficar perfeita.

No início, experimentei o @lipdubai para as falas. Os resultados foram fantásticos, mas a plataforma deles é melhor para sequências longas de fala, não para tomadas de 1 a 2 segundos como você vê no trailer. No fim, acabei usando o recurso de sincronia labial (lip sync) do próprio Kling e ficou muito bom.

Para fazer com que as cenas combinassem com o trailer original no Midjourney, fiz o upload de capturas de tela (stills) do trailer no @ChatGPTapp e pedi para ele me dar uma descrição de tudo na cena. Depois, simplifiquei essas descrições para que o Midjourney pudesse entender melhor.

Após gerar várias imagens que gostei, criei referências de cena para a estética geral e referências de personagem a partir dos modelos base do @Magnific_AI. O Midjourney permite que você referencie tanto a cena quanto o personagem em um único comando (prompt).

Dica de mestre: Se você estiver adicionando uma referência de personagem para o rosto, use o parâmetro --cw 10. Isso faz com que ele referencie apenas o rosto, mas baseie a roupa e a cena no seu texto. Se eu não tivesse usado --cw 10 nesta tomada, teria sido apenas um close do rosto dela. Além disso, use o zoom out de 2x.

Quando levei as imagens para o Kling 1.5, usei comandos simples como “câmera lenta”, “ela galopa rapidamente”, “explosões ao fundo”. Eu configurava para gerar 2 ou 3 vídeos por imagem. (Isso ficou bem caro, e precisei rodar algumas tomadas 10 vezes até acertar).

Também usei prompts negativos: ARTEFATOS, LENTO, FEIO, BORRADO, DEFORMADO, MÚLTIPLOS MEMBROS, CARTOON, ANIME, PIXELADO, ESTÁTICO, NÉVOA, PLANO, INDEFINIDO, DISTORCIDO, ERRO, PARADO, BAIXA RESOLUÇÃO, SUPERSATURADO, RUÍDO, MORFAGEM, DEFORMAÇÃO.

Depois, levei todas as tomadas para o Final Cut Pro X (FCPX) e as sobrepus ao trailer original.

Se você está pensando em fazer isso com um orçamento limitado, sugiro usar o Runway. Eles teriam me poupado mais de $700 dólares, mas eu precisava de resolução 1080p.

É isso! Sinta-se à vontade para me seguir no X para ver mais filmes feitos com IA.

O Sora 2 chegou com o pé na porta e mostrando o futuro da criação de vídeos por IA. Com física realista, a capacidade de gerar clipes de alta fidelidade a partir de texto é inegável.

Mas para ir além do básico e não cair na “frustração” dos vídeos inconsistentes ou censurados, é preciso mais do que um prompt simples. Aqui está o nosso guia definitivo, com 25 dicas para você virar um videoprompter de verdade.

Acesso, Fluxo de Trabalho e Estratégia (As Dicas de Setup)

1. Comece com o Free: Aproveite o modelo gratuito, que oferece 30 (eram 100 :/) gerações a cada 24 horas. Use-o para testar as estruturas de prompt antes de qualquer investimento.

2. Use-o para Prototipagem Rápida: Não encare o Sora 2 (ainda) como um substituto para ferramentas profissionais. Pense nele como um gerador de faíscas criativas ou uma ferramenta de prototipagem rápida para testar ângulos e conceitos.

3. Priorize o Conteúdo Social: A força do Sora 2 está no potencial viral. Concentre seus esforços em clipes curtos, visuais e de alto impacto, ideais para redes sociais.

4. Explore Ninchos Específicos: A IA é excelente para gerar conteúdo em indústrias como imobiliário (tour por propriedades) e publicidade. Use o Sora 2 para criar vídeos de produto em lifestyle que geram desejo.

5. Acesso: Atualmente, você precisa de uma VPN, pois só está disponível nos EUA e Canadá e uma conta do ChatGPT.

6. Use Imagem de Referência (Input): Para vídeos ancorados em um local ou objeto específico, faça upload de uma imagem de referência. Você pode pedir que a IA adicione elementos a essa imagem (ex: um agente imobiliário caminhando pela casa).

Criação de Prompts (O Roteiro Técnico)

7. Use a Estrutura Básica: Para começar, defina o prompt em três partes claras: Ação/Evento + Cenário/Ambiente + Preferências de Estilo.

8. Seja Extremamente Descritivo: Use adjetivos de forma livre para saturar o prompt com o tom, humor e atmosfera que você deseja. Descreva os detalhes visuais e sensoriais de forma vívida.

9. Especifique o Estilo Visual: Adicione descritores como: cinematográfico, animação 3D, estilo surrealista, inspirado em Salvador Dalí, ou documentário.

10. Não se Preocupe com Cortes: Diferente de outras IAs, você não precisa escrever termos técnicos como jump cut. O Sora 2 gera cortes e tomadas automaticamente (macro, close-up, etc.) a partir de um prompt básico.

11. Controle a Câmera (e Não o Personagem): Especifique o movimento de câmera (dolly, pan, na mão, tilt etc), mas evite movimentos muito complexos no personagem para garantir um resultado mais limpo.

12. Escolha uma Lente: Defina a estética com tipos de lente. Use termos como lente grande de 24mm, anamórfica 2.0x, ou compressão de lente longa com bokeh doce.

13. Defina a Iluminação e Cor: Não use “iluminação cinematográfica”. Use termos específicos como: tungstênio quente com alto contraste, luz solar quente da esquerda da câmera, ou a hora do dia (meio dia, hora dourada).

14. Codifique a Paleta de Cores: Seja direto sobre as cores. Ex: “Azuis frios para o lado frio, laranjas quentes para o lado quente”.

15. Adicione Textura: Para evitar o “visual de plástico” ou excessivamente suave, peça por descritores como: grão de filme sutil, micro-destaques especulares e detalhes de pele realistas.

16. Detalhe o Áudio (Implícito): Embora a IA gere o visual, use o prompt para orientar o som. Inclua o ambiente: som natural implícito, camadas de ambiente, farfalhar sutil de papel.

Consistência e Evitando Frustrações (As Dicas Anti-Bug)

17. Force a Consistência de Física: Para evitar que objetos se transformem ou a física falhe, use restrições no prompt como: “física precisa“, “sem transformação de objeto“, ou “manter guarda-roupa consistente“.

18. Priorize Vídeos Mais Curtos: É mais fácil (e mais seguro) gerar dois planos perfeitos de 5 segundos e editar do que tentar a sorte com um único plano de 10 segundos.

19. Itere de Forma Inteligente: Gere múltiplas seeds (variações) de um prompt. Escolha a melhor e, para refinar, altere apenas uma variável por vez (ex: só a iluminação, depois só o ângulo).

20. Use Movimentos de Câmera Lentos: Movimentos de câmera muito rápidos ou ambíguos podem causar instabilidade ou distorção no fundo. Opte por dolly-in lento ou elevação lenta de grua.

21. Não Conte com o Texto: O Sora 2 falha na legibilidade de texto. Não confie nele para gerar títulos ou logotipos. Adicione o texto em um software de edição externa.

22. Crie Seu Glossário Pessoal: Mantenha um banco de “blocos de prompts” (iluminação, câmera, textura) que funcionam bem. Isso agiliza o processo para resultados cinematográficos.

Evitando a Censura e o Copyright (O Caminho Seguro)

23. Use Arquétipos em vez de Propriedade Intelectual (PI): Evite nomes de marcas, personagens ou franquias (ex: Disney, Nintendo). Use descrições genéricas como “correio espacial retrô” em vez de um herói específico.

24. Pessoas falecidas ou históricas estão liberadas: Parece loucura e falta de respeito, mas os que já se foram não podem reclamar. Dá pra utilizar pessoas famosas ou figuras históricas como Stephen Hawking e Marilyn Monroe a vontade.

25. Seja Explícito para se Proteger: Caso seu prompt toque em áreas sensíveis, adicione uma linha de segurança: “sem personagens protegidos por direitos autorais ou marcas reconhecíveis” para lembrar a IA de manter o conteúdo original.

Qual a sua melhor dica? Você já usou o Sora 2? Deixe nos comentários qual foi o prompt mais criativo que você gerou e quais outras dicas de fluxo de trabalho você adicionaria a esta lista!

No mundo em constante evolução da inteligência artificial e da criação de conteúdo, o Runway ML continua a inovar com ferramentas que transformam a maneira como interagimos com a mídia digital. Uma dessas inovações é o Act-Two, uma funcionalidade poderosa projetada para animar personagens com movimentos realistas, fala e expressões, tudo a partir de vídeos de performance. Este post explora como o Act-Two funciona, suas melhores práticas e como você pode utilizá-lo para dar vida aos seus personagens digitais.

O Act-Two permite a transferência de movimento de um vídeo de performance (onde alguém atua uma cena) para um personagem de referência (imagem ou vídeo). Isso significa que você pode capturar a essência de uma atuação humana e aplicá-la diretamente a um personagem digital, resultando em animações incrivelmente autênticas. Além disso, ao usar uma imagem de personagem, o Act-Two oferece controle de gestos, permitindo que você controle os movimentos das mãos e do corpo através do vídeo de performance. Ele também adiciona automaticamente movimento ambiental às imagens de entrada para criar tomadas mais naturais em uma única geração.

Video Original	Referência	Resultado
	Imagem
	Vídeo Referência

Como o Act-Two Funciona: Selecionando as Entradas

Para começar a criar com o Act-Two, você precisará de duas entradas principais:

1.Vídeo de Performance: Um vídeo de uma pessoa atuando a cena que você deseja animar. Este vídeo captura o movimento, expressões, áudio e gestos que serão transferidos para o seu personagem.

2.Entrada do Personagem: Uma imagem ou vídeo do personagem que você deseja animar.

Escolhendo entre Imagem ou Vídeo de Personagem

A escolha entre uma imagem ou um vídeo de personagem como entrada é crucial, pois afeta o nível de controle e os resultados da geração:

•Imagens de Personagem: Oferecem uma experiência mais fluida. As gerações com imagens de personagem adicionam automaticamente movimento ambiental e permitem controlar gestos e movimentos corporais através do vídeo de performance. Isso é ideal para criar cenas dinâmicas com controle preciso sobre a atuação do personagem.

•Vídeos de Personagem: Mantêm o assunto, o ambiente e o movimento da câmera do vídeo original. O Act-Two controla o movimento facial e as expressões, mas o controle de gestos não está disponível. Isso é útil se você já tem um vídeo de personagem com um ambiente e movimento de câmera específicos que deseja preservar.

Por exemplo, se você usar a mesma performance com uma imagem de personagem e um vídeo de personagem, a imagem de personagem pode adicionar um leve tremor de câmera e permitir o controle de gestos, enquanto o vídeo de personagem adicionará movimento facial, mas manterá o movimento original da câmera e da cena.

Considerações sobre Duração e Movimento de Câmera

•Duração: Se o seu vídeo de performance for mais longo que o vídeo do personagem, o vídeo do personagem será repetido em loop com um efeito de

“bumerangue” invertido para corresponder à duração da performance. Para resultados mais naturais, é preferível usar uma imagem de personagem se você não tiver um vídeo de personagem que corresponda à duração da sua performance.

•Movimento de Câmera e Ambiental: Usar um vídeo de personagem utilizará o movimento da câmera, do personagem e ambiental contido no vídeo original. Usar uma imagem de personagem adicionará automaticamente movimento de câmera e ambiental. Se um movimento de câmera e ambiental específico for necessário para sua tomada, optar por um vídeo de personagem pode ser ideal.

Melhores Práticas para Entradas

Para obter os melhores resultados com o Act-Two, é fundamental seguir algumas melhores práticas ao selecionar seus vídeos de performance e entradas de personagem:

Vídeo de Performance

•Apresente um único sujeito no vídeo.

•Garanta que o rosto do sujeito permaneça visível durante todo o vídeo.

•Enquadre o sujeito, no máximo, da cintura para cima.

•Bem iluminado, com características faciais definidas.

•Sem cortes que interrompam a tomada.

•Garanta que a performance siga os padrões de Confiança e Segurança do Runway ML.

•Gestos: Garanta que as mãos do sujeito estejam no enquadramento no início do vídeo.

•Gestos: Comece em uma pose semelhante à sua entrada de personagem para obter os melhores resultados.

•Gestos: Opte por movimentos naturais em vez de movimentos excessivos ou abruptos.

Imagem de Personagem

•Apresente um único sujeito.

•Enquadre o sujeito, no máximo, da cintura para cima.

•O sujeito deve ter características faciais definidas (como boca e olhos).

•Garanta que a imagem siga os padrões de Confiança e Segurança do Runway ML.

•Gestos: Garanta que as mãos do sujeito estejam no enquadramento no início do vídeo.

Vídeo de Personagem

•Apresente um único personagem no vídeo.

•Enquadre o sujeito, no máximo, da cintura para cima.

•O sujeito deve ter características faciais definidas (como boca e olhos).

•Sem cortes que interrompam a tomada.

•Use um vídeo próximo à duração da performance para obter os resultados mais naturais.

Configurando as Definições

Após selecionar suas entradas, você pode configurar duas definições importantes antes de iniciar a geração:

Gestos

A definição de gestos controla se as poses, gestos e movimentos corporais do vídeo de performance são transferidos para as entradas de imagem do personagem. Quando esta definição está desativada, o Act-Two se concentra em adicionar movimento facial e ambiental. Esta definição não está disponível ao usar vídeos de personagem, pois o movimento deste vídeo determina os movimentos corporais do seu personagem.

É importante notar que habilitar esta definição fará com que o personagem siga de perto o vídeo de performance e pode mudar a pose do personagem. Para manter uma pose ou direção semelhante, tente combinar a pose e o posicionamento da sua imagem de personagem no seu vídeo de performance.

Expressividade Facial

A definição de expressividade facial controla a quantidade de movimento facial transferida do vídeo de performance para a entrada do seu personagem. O valor padrão é 3, mas você pode usar um valor menor ou maior:

•Valores mais baixos: Resultam em menos expressividade, mas podem melhorar a consistência do personagem em certos casos.

•Valores mais altos: Resultam em mais expressividade, mas podem levar a artefatos visuais em certos casos.

Recomenda-se testar suas entradas com o valor padrão primeiro e, em seguida, fazer ajustes conforme necessário com base nos resultados.

Gerando o Vídeo Act-Two

Uma vez que você confirmou as definições, está pronto para gerar. Você pode passar o mouse sobre o modal de duração para ver o custo de crédito calculado antes de gerar. Clique no botão Gerar após confirmar que está satisfeito com as entradas selecionadas, definições e custos de crédito.

Seu vídeo começará a ser processado em sua sessão atual, onde cada vídeo estará disponível para revisão assim que for concluído.

Entendendo o Preço do Act-Two

O Act-Two cobra 5 créditos por segundo, com um mínimo de 3 segundos. Isso significa que vídeos de performance com menos de 3 segundos resultarão em uma cobrança de 15 créditos.

O Hailuo 02 está revolucionando a geração de vídeos com inteligência artificial, conquistando a segunda posição no ranking da Artificial Analysis Text-to-Video Arena, superando modelos consolidados como Google VEO-3 e Kling 2.1. Este novo modelo representa um salto significativo na qualidade e acessibilidade da criação de vídeos com IA.

Avanços Impressionantes

O Hailuo 02 traz cinco melhorias fundamentais que o destacam da concorrência. Primeiro, apresenta capacidades superiores de interpretação de prompts, alcançando impressionantes 85% de taxa de sucesso em instruções complexas e detalhadas. Segundo, produz movimentos mais naturais e realistas, lidando com físicas extremas incluindo acrobacias e movimentos intrincados, oferecendo detalhes ultra-nítidos, renderização suave e precisão de cores líder no mercado.

A consistência de personagens é outro ponto forte, mantendo identidade estável dos personagens através de diferentes cenas e ângulos, característica essencial para filmagem com IA. Além disso, entrega iluminação mais rica, melhor composição e sensação cinematográfica geral, com mínimas falhas visuais. Por fim, oferece suporte HD completo, gerando vídeos de alta resolução de até 10 segundos em 768p e até 6 segundos em 1080p.

Funcionalidades Completas e Controle Profissional

A plataforma oferece tanto conversão de texto para vídeo quanto imagem para vídeo, permitindo criar conteúdo diretamente a partir de prompts de texto ou transformar imagens estáticas em vídeos dinâmicos. O diferencial está no controle de câmera, que oferece dois modos distintos: o Cinematic Shot aplica movimentos cinematográficos automaticamente aos vídeos com estilos pré-definidos, enquanto o Free Selection proporciona maior controle personalizado sobre o estilo da câmera.

O Hailuo 02 foi desenvolvido para ser acessível a todos os usuários, com novos usuários recebendo 500 créditos gratuitos de boas-vindas para explorar todas as funcionalidades. Com sua combinação de realismo superior, consistência de personagens e controle profissional de câmera, o Hailuo 02 estabelece um novo padrão para geração de vídeos com IA, tornando-se uma ferramenta essencial para criadores de conteúdo e profissionais que buscam qualidade cinematográfica.