A primeira vez que falamos sobre essa possibilidade foi em setembro do ano passado: a equipe da Runway apresentou uma prévia da sua nova ferramenta de texto para vídeo com inteligência artificial, e isso deu origem a um modelo inicial de vídeo para vídeo chamado Gen-1. Agora, a Runway antecipa a chegada do próximo salto geracional, o Gen-2, que promete vários modos de processamento e uma grande facilidade de uso.
Você prepara um prompt, carrega no modelo, o modelo comete alguns erros, você ajusta o prompt e tenta de novo. Tudo o que você fez até aqui é mudar e reordenar palavras, sem Photoshop ou ferramentas avançadas. Não importa se é Midjourney, DALL-E ou Stable Diffusion: a geração de imagens com inteligência artificial está cada vez mais simples e precisa.
No entanto, isso é apenas a ponta do iceberg. A geração de vídeos a partir de texto se aproxima em alta velocidade, e já podemos testar recursos como o ModelScope, disponível no portal HuggingFace. Mas um dos grandes players desse campo é a Runway, e com o anúncio do seu novo modelo Gen-2, os usuários terão a possibilidade de gerar clipes de três segundos, com oito modos diferentes de processamento.
Runway Gen-2: de texto para vídeo, sem escalas
Text to Video é o primeiro dos modos e, como o nome sugere, tudo o que pede para começar é um prompt de texto. Em seguida vem Text + Image to Video, que além do prompt também usa uma imagem de referência. Image to Video elimina a influência do prompt para dar toda a atenção à imagem, e Stylization permite a transferência de um estilo específico para cada quadro de um vídeo existente.
Storyboard é ideal para processar mockups (por exemplo, imaginar uma série de livros como edifícios em uma cidade), Mask aplica modificações a um objeto específico dentro de um vídeo, Render é como Image to Video, mas usa animações 3D, e Custom nos fala de um treinamento mais avançado para o modelo.
Se você está interessado em testar o Gen-2, precisará criar uma conta na Runway, seguir o perfil no Twitter e esperar. O 'coming soon' pode ser um pouco frustrante, mas a Runway levou os testes do Gen-1 com muita calma, e não há razões para mudar sua estratégia.
Site oficial: Clique aqui
