Cyberpunk 2077 usa animações alimentadas por IA para sincronização labial em 10 idiomas

O diálogo dublado do Cyberpunk 2077 oferecerá suporte a dublagem labial e animações faciais em 10 idiomas diferentes, graças ao poder da tecnologia de IA.

O Cyberpunk 2077  está a menos de um mês do lançamento e foi revelado que está utilizando IA para combinar animações com sincronização labial em 10 idiomas diferentes. O jogo está configurado para suportar um total de 18 idiomas diferentes no lançamento, com apenas os 10 mencionados acima sendo totalmente dublado. De resto, os jogadores poderão ativar as legendas do jogo, que também podem ser personalizadas pelos jogadores de acordo coma sua preferência.

Em outros jogos, a animação facial e de fala geralmente é obtida com atores e equipamentos de captura de movimento e, embora essa abordagem leve a animações mais detalhadas e expressivas, geralmente limita as animações a um único idioma, como era o caso com Ghost of Tsushima. Embora o jogo suportasse diálogos dublados em inglês e japonês, as animações estavam disponíveis apenas para a opção de idioma inglês, então o diálogo na dublagem japonesa parecia não natural com a falta de animações sincronizadas.

Para o Cyberpunk 2077 , o CD Projekt Red buscou a ajuda da tecnologia da Jali Research para obter as animações faciais baseadas em IA e o diálogo multilíngue do jogo. Em uma apresentação recente da Jali Research , o cofundador Chris Landreth explica como a empresa foi capaz de obter o sistema de animação de diálogo impulsionado por IA para Cyberpunk 2077 , que inclui um modelo acústico, um dicionário de pronúncia e um G2P (grafema para fonema) para cada um dos 10 idiomas de diálogo suportados, que atualmente incluem inglês, francês, alemão, japonês, português brasileiro, polonês, russo, mandarim, italiano e espanhol.

A apresentação mostra como o sistema não apenas constrói as animações de sincronização labial do personagem, mas o resto das animações faciais também, dependendo da linguagem específica e quão flexível é a linguagem. Por último, Jali também mostra como a tecnologia usa a marcação de transcrição para animar o diálogo para personagens bilíngues e alternar entre vários idiomas em uma única frase. Não está claro quanto do diálogo do jogo será expresso, mas a quantidade de diálogo em Cyberpunk 2077 parece ser incrivelmente grande. 

A apresentação mostra quanto trabalho e esforço a CD Projekt RED está investindo para tornar o Cyberpunk 2077 um jogo incrivelmente impressionante, o que infelizmente levou a empresa a implementar algumas análises de última hora Esperançosamente, todo o tempo e trabalho que os desenvolvedores e seus parceiros, como Jali Research, investiram no jogo, valem a pena e ele se torna ainda mais bem-sucedido do que o sucesso anterior do estúdio, The Witcher 3.

Fonte Original

Deixe seu comentário