AI gera videoclip a partir uma só imagem e música

O modelo AI EMO da Alibaba é capaz de criar vídeos impressionantes a partir de uma única imagem.

Com o Udio podemos criar músicas AI dando uma descrição. Agora, imagine-se as potencialidades quando combinado com outros modelos AI capazes de criar vídeos realistas de alguém a cantar, com base numa única foto do seu rosto.

É isso que se pode ver no vídeo que se segue, com as partes mais impressionantes a nem serem as expressões feitas enquanto está a cantar, mas sim os movimentos feitos durante as pausas.

This still blows my mind. Look at what she does when there are no lyrics playing.

Now that AI music is almost indistinguishable from real music, what do you think future music videos might look like? pic.twitter.com/RbYpw94ELI

— Halim Alrasihi (@HalimAlrasihi) April 9, 2024

Imagine-se isto extrapolado para uma altura em que este tipo de processamento possa ser feito em tempo real e aplicado na representação dos assistentes AI - para não falar da aplicação em filmes e jogos.