Um aplicativo para capturar expressões faciais e animar personagens


As expressões dos personagens de videogame estão se tornando cada vez mais realistas, e podem dar um salto ainda maior graças às técnicas usadas recentemente por grandes empresas.

Agora é a Unreal Engine que apresenta um aplicativo iOS usado para capturar expressões faciais e animar personagens na tela em tempo real.

Live Link Face foi projetado para funcionar tanto em ambientes profissionais de criação de jogos quanto em um palco com atores ou um único artista em um escritório. Está disponível no iTunes, para que qualquer pessoa possa experimentá-lo.

O aplicativo usa a plataforma de realidade aumentada da Apple, ARKit, e a câmera TrueDepth frontal do iPhone (introduzida no iPhone X em 2017) para capturar recursos faciais e transmitir os dados para o Unreal Engine. O aplicativo também captura o movimento da cabeça e do pescoço, transmitindo-o para animação.

O aplicativo usa redes multicast para sincronizar com vários dispositivos ao mesmo tempo, o que torna tudo mais realista, tanto em ambientes profissionais quanto amadores.

Não sabemos se algo assim chegará ao Android, pois no momento ele usa algo interno à plataforma Apple, em ambientes muito mais controlados, graças ao fato de não haver tantas câmeras frontais diferentes quanto no mundo android.

Com esse tipo de tecnologia, jogos mais realistas podem ser produzidos e agora querem democratizá-la para que a produção virtual alcance mais lugares, não apenas o mundo dos videogames profissionais.