Revolucione a criação de vídeos com o Lumiere alimentado por IA do Google!

,

Tanto o próprio Google quanto o Meta publicaram nos últimos meses outros modelos de geração de vídeos baseados em prompts de texto que, no entanto, ainda estavam longe do que os modelos de imagens estáticas vinham alcançando. Lumière chega agora com o objetivo de encurtar distâncias nesse campo.

Para isso, O Google treinou este modelo usando um enorme banco de dados de 30 milhões de vídeos , o que permite não só melhorar a geração de vídeo a partir de texto, mas também realizar outra série de tarefas relacionadas que abrem toda uma gama de possibilidades criativas. Vamos resumir rapidamente tudo o que você pode fazer:

-Texto para vídeo: a base para cada modelo de vídeo. -Imagem para vídeo: a segunda base para modelos de vídeo atuais, converte imagens estáticas em vídeos. -Geração ‘estilizada’: Usando uma imagem de referência, o Lumiere pode gerar vídeos com base no estilo de uma imagem que fornecemos. -Cinemagraphs: o Lumiere pode animar apenas partes específicas de imagens estáticas. -Edição de vídeo: Equivalente ao ‘inpainting’ da geração de imagens, o Lumiere pode editar qualquer parte específica de um vídeo aplicando um prompt apenas em uma área selecionada dele. É perfeito para fornecer 5 segundos de movimento a imagens geradas com outros modelos de IA, como MidJourney ou DALL-E Neste site Cinco sites para fazer vídeos com inteligência artificial e economizar tempo

Por que o lançamento do Lumiere é relevante

O que realmente diferencia o Lumière dos demais modelos é sua arquitetura"espaço-tempo", que permite gerar clipes inteiros em uma única etapa, evitando assim a inconsistência temporal observada nos modelos anteriores, em que a imagem poderia sofrer uma mutação bastante maneira grotesca** durante os poucos segundos que durou o vídeo.

A fim de atingir uma sensação de fluxo natural e continuidade no conteúdo de vídeo que está se tornando mais realista, mas ainda não atinge o grau de realismo visual exibido por certos sistemas de inteligência artificial geradores de imagens.

Outro avanço notável é a forma que facilita o processo de edição de vídeo para usuários com pouco conhecimento: o Lumiere pode modificar partes específicas de um vídeo com uma máscara simples e um prompt de texto

Além disso, a produção de vídeos estilizados a partir de uma imagem de referência permite a criação de conteúdos com um estilo visual uniforme, o que anteriormente era um grande obstáculo nesta área.

Todas estas funcionalidades (assim como as cinemagraphs) têm um enorme potencial em áreas como a publicidade, o cinema e a criação de conteúdos digitais.

repetindo erros

No entanto, embora já tenha sido apresentado, Ainda estamos à espera que a Google ofereça acesso a este modelo ao público geral e possa assim ser posto à prova por qualquer utilizador, aspecto criticado por alguns utilizadores…

…que reproduz a forma como o Google apresentou modelos anteriores de IA e, claro, Não nos permite avaliar adequadamente se o Google realmente se posicionou à frente de seus principais concorrentes. neste campo, como Runway ou Pika

0

Imagem | Google

Nesta plataforma, os desenvolvedores do Stable Diffusion introduziram uma solução inovadora conhecida como Stable Video Diffusion, que permite aos usuários produzir conteúdo de vídeo gerado por inteligência artificial com base na entrada de texto fornecida.

1

*️⃣ Link da fonte:

Lumière ,