Inteligência Artificial já permite transformar palavras em vídeo

Postado em


Imagine a cena de um poeta recitando um poema e um computador criando um vídeo ao mesmo tempo, com cenas relacionadas às imagens.

Isso é o que um novo sistema de inteligência artificial conseguiu, e o resultado é surpreendente.

A transformação do áudio em texto é uma realidade há muitos anos, mas neste caso é um processo inverso de interpretação do conteúdo, não apenas da transcrição.

Postaram um vídeo criado pelo artista e animador de computador Glenn Marshall, que usa IA para narrar e criar visualizações de poemas. O vídeo em questão é baseado no poema ‘In the Bleak Midwinter’, escrito pela escritora inglesa do século XIX Christina Rossetti.

Como podemos ver, não são animações muito sofisticadas, parecem ter saído de um sonho, mostrando cenas que lembram os versos, mas gerando uma sensação bem diferente daquela que seria produzida ouvindo apenas o áudio .

Para criá-lo, foi utilizada a biblioteca Story2Hallucination e, para a narração, o vídeo utiliza a ferramenta vo.codes, que empresta a voz de Christopher Lee.

É apenas um exemplo do que pode ser feito com essa tecnologia. Neste mesmo ano a OpenAI revelou uma nova biblioteca chamada DALL-E que converte palavras e frases em imagens, por isso, estamos a um passo para que possamos criar automaticamente vídeos musicais ou novas sensações no YouTube a partir de narrações de livros ou mesmo notícias.