Como são feitos os vídeos de IA que trocam pessoas?

As redes sociais ficaram repletas de memes nas últimas semanas em que figuras famosas são inseridas em vídeos populares. A tendência usa IA para trocar os personagens e ainda manter a alta qualidade de imagem.

Alguns dos exemplos mais famosos são a comemoração do jogador de futebol Enzo Fernandez durante a Copa do Mundo e uma apresentação do grupo de hip-hop Migos. A proximidade do segundo turno das eleições também rendeu clipes com políticos brasileiros.

A seguir, o Canaltech explica o procedimento por trás dos vídeos virais:

Como os vídeos funcionam?

Os clipes usam uma tecnologia chamada Motion Swap ("troca de movimento", em tradução livre), no qual a IA identifica o personagem principal e substitui o movimento por outra pessoa. O recurso também pode ser usado para trocar cenários ou a roupa dos elementos envolvidos, por exemplo.

Após enviar uma foto da pessoa que será inserida no vídeo, a ferramenta gera várias imagens estáticas do mesmo modelo e depois cria um vídeo com o novo personagem em 3D. É comum que os apps também ofereçam uma galeria de templates prontos para evitar o trabalho de redigir prompts extensos.

Quais ferramentas são usadas?

Algumas das plataformas mais populares para a tarefa são Ausar.ai, Creathoon e a brasileira Real Oficial. As ferramentas não usam um único modelo específico: na verdade, recorrem a modelos de vídeo e imagem de diferentes empresas e escolhem a melhor opção para cada tarefa.