Nova IA do Google consegue transformar muita coisa em animação
O Google anunciou o VideoPoet, um modelo de linguagem de grande escala (LLM, na sigla em inglês) capaz de gerar vídeos por meio de inteligência artificial (IA).
A capacidade de animar imagens e editar vídeos através de inpainting (preenchimento de espaços) e outpainting (extensão de imagens) é um dos destaques do novo modelo, segundo a empresa. Diferentemente de modelos baseados em difusão, como o Imagen Video, o VideoPoet integra várias capacidades de geração de vídeo em um único LLM.
Entre suas diversas aplicações, o VideoPoet permite a geração de vídeos a partir de textos, animação de imagens estáticas, estilização de vídeos com base em informações de profundidade e fluxo óptico, e criação de clipes de áudio sem orientação textual. Além disso, oferece suporte para geração de vídeos na orientação retrato, ideal para conteúdo de curta duração.
O VideoPoet demonstrou sua habilidade em gerar vídeos mais longos mantendo a consistência visual dos objetos, segundo o Google. A edição interativa de vídeos permite a manipulação de objetos para realizar ações variadas, enquanto o controle preciso dos movimentos da câmera é possível através de comandos de texto.
De acordo com a postagem no blog, este modelo evidencia o potencial imenso dos LLMs na geração de conteúdo de vídeo. A alta qualidade dos vídeos gerados sugere possíveis extensões para outras áreas, como texto-para-áudio, áudio-para-vídeo e legendagem automática de vídeos, abrindo novos horizontes no campo da inteligência artificial e multimídia, segundo o Google.
Fonte: Olhardigital
