Deepfake da Disney está se aproximando de uma estréia no Cinema

Quão perto estão os deepfakes de serem usados ​​em filmes e programas de TV de grande orçamento? Bem perto, se uma nova demo da Disney é algo a se passar. Em um vídeo e artigo sendo apresentado em uma conferência de computação gráfica nesta semana, pesquisadores da House of Mouse mostram o que eles dizem ser o primeiro deepfake foto-realista com resolução de megapixel.

E os resultados são … muito bons! Eles não são alucinantes, certamente, e não são bons o suficiente para serem usados ​​no próximo filme da Marvel, mas é um passo sólido em relação aos deepfakes que vimos no passado.

Como sugerem os pesquisadores, o que há de novo aqui é a resolução de megapixels. Megapixels podem não ser mais o sinônimo de imagens de alta qualidade que costumavam ser. (A câmera do seu telefone provavelmente tem uma contagem de megapixels de dois dígitos para começar.) Mas até agora, a tecnologia deepfake concentrou-se em transferências faciais suaves, em vez de aumentar a contagem de pixels.

Os deepfakes que você provavelmente já viu até agora podem parecer impressionantes no seu telefone, mas suas falhas seriam muito mais aparentes em uma tela maior. Como exemplo, os pesquisadores da Disney observam que os vídeos de resolução máxima que eles poderiam criar a partir do popular modelo deepfake de código aberto DeepFakeLab tinham apenas 256 x 256 pixels de tamanho. Em comparação, o modelo deles pode produzir vídeo com uma resolução de 1024 x 1024 – um aumento considerável.

Além disso, a funcionalidade do modelo deepfake da Disney é bastante convencional: é capaz de trocar as aparências de dois indivíduos, mantendo as expressões faciais do alvo. Se você assiste ao vídeo, observe como a saída parece tecnicamente restrita. Produz apenas deepfakes de indivíduos bem iluminados olhando mais ou menos diretamente para a câmera. Ângulos desafiadores e iluminação ainda não estão na agenda desta tecnologia.

Como observam os pesquisadores, porém, estamos nos aproximando da criação de deepfakes bons o suficiente para projetos comerciais. No momento, quando uma empresa como a Disney quer fazer uma troca de rostos, usa o VFX tradicional, como o estúdio fez quando criou modelos virtuais dos atores falecidos Peter Cushing e Carrie Fisher para o filme Star Wars Rogue One .

“Embora esses resultados sejam impressionantes, eles são caros para produzir e normalmente levam muitos meses de trabalho para atingir meros segundos de filmagem”, escrevem os pesquisadores. Os Deepfakes, em comparação, exigem muito menos supervisão, uma vez que o modelo original foi construído, e podem produzir vídeo em questão de horas (dado o orçamento certo para o poder da computação).

Cedo ou tarde, os deepfakes deixarão de ser um projeto de pesquisa e começarão a ser uma opção viável para grandes estúdios. De fato, alguns argumentam que já estão lá.

Saiba mais sobre a tecnologia Deepfake que está sendo explorada pala Disney em nosso setor especializado em tecnologias.