Lumiere, do Google, cria vídeos com AI a partir de texto ou referências

A Google é uma das empresas que mais tem investido no mercado de inteligência artificial e a novidade mais recente é a Lumiere, ferramenta que cria vídeos com AI em formato que beira o realismo e até mesmo pode enganar os mais desatentos. Veja todos os detalhes e quando isso ficará disponível para uso.

Como o Lumiere funciona?

Desenvolvida pela Google em parceria com a Universidade de Tel Aviv e o Weizmann Institute of Science, ambos de Israel, a inteligência artificial Lumiere cria vídeos a partir de comandos de textos ou envio de imagens estáticas. Da mesma forma que você pede para o ChatGPT ou Dall-E criar uma imagem, também será possível enviar comandos para receber vídeos.

Para entregar os resultados, a IA usa a arquitetura Space-Time U-Net em sua estrutura. Na prática, todos os quadros do vídeo são gerados de uma só vez, invés de serem gerados um a um para que uma mídia completa seja entregue.

Esta nova inteligência artificial foi definida pela Google como “um modelo de difusão de texto para vídeo projetado para sintetizar vídeos que retratam movimentos realistas, diversos e coerentes”. Assista aos primeiros resultados:

É fato que ainda serão necessários muitos ajustes para que a inteligência artificial consiga convencer os mais atentos, e, ao assistir um vídeo mais de perto, fica claro que o conteúdo foi criado por um modelo de linguagem. Mas os primeiros resultados impressionam.

Demonstramos resultados de geração de texto para vídeo de última geração e mostramos que nosso design facilita facilmente uma ampla gama de tarefas de criação de conteúdo e aplicativos de edição de vídeo, incluindo imagem para vídeo, pintura interna de vídeo e geração estilizada.

Pesquisadores que desenvolveram o Google Lumiere

Diferenciais da ferramenta de criar vídeos

Ao contrário de outras ferramentas já disponíveis na internet, a Lumiere chega com um recurso que leva o nome de Geração estilizada. Na prática, você poderá enviar uma imagem de referência com um estilo único (artes 3D, imagens mais realistas ou mais animadas) para gerar os quadros dos vídeos.

Outro diferencial é o Cinemagrafia. Esta funcionalidade lembra o modo retrato que vemos nos smartphones: ela é focada em animar o centro de uma imagem, enquanto o restante fica em modo estático.

No exemplo mostrado pelos pesquisadores, foi possível alterar a cor do vestido de uma mulher que caminhava pelo campo, sem perda de qualidade e a necessidade de enviar todo um novo comando para ter um vídeo que pode enganar os mais desatentos.

Disponibilidade

Ainda em desenvolvimento, esta inteligência artificial não deve ser lançada tão cedo. A empresa ainda tem receios sobre um mal uso da novidade, então está tomando cuidados e mexendo em todos os detalhes antes de lançar isso para o público geral. As preocupações ficam ainda maiores em um ano de eleições presidenciais nos EUA.

Rumores mais fortes apontam que a Lumiere será integrado ao Google Bard em algum momento, mas uma data certa para isso acontecer ainda não foi divulgada. Os pesquisadores afirmam que o objetivo é oferecer aos usuários novatos a chance de criar conteúdo visual de forma criativa e flexível. Mas como isso será disponibilizado continua em aberto.

O maior trabalho agora será a criação de ferramentas que identifiquem casos de usos maliciosos para que a segurança de uma pessoa ou grupo específico não seja colocada em risco. Em 2022, durante o período eleitoral no Brasil, muitas deepfakes, incluindo uma com a jornalista Renata Vasconcellos, foram criadas para favorecer Jair Bolsonaro.

Esta não é a primeira ferramenta de criar vídeos apresentada pelo Google: em dezembro de 2023, a empresa apresentou o VideoPoet, desenvolvido para criar vídeos animados. Nos resta esperar por mais informações.

Você acredita que identificaria um vídeo criado por inteligência artificial? Diga pra gente nos comentários!

Assista o vídeo no canal do Showmetech:

Veja também

Pika é um editor que usa IA para transformar texto em vídeo

Com informações: The Verge l Githubl Arxiv.org

Revisado por Glauco Vital em 29/1/24.