More

    O modelo de IA cria avatares em 3D a partir da imagem de uma pessoa


    E se tudo o que fosse necessário para criar um avatar digital realista de uma pessoa fosse uma única imagem? Em um artigo aceito na Conferência sobre Visão Computacional e Reconhecimento de Padrões (CVPR) 2020, os pesquisadores do Imperial College London e do FaceSoft.io, uma startup que aproveita a IA e o aprendizado de máquina para análise facial, descrevem o AvatarMe, uma técnica capaz de reconstruir 3D fotorrealista bustos de fotos “in-the-wild”. Eles alegam que ele supera os sistemas existentes por uma “margem significativa” e gera faces 3D autênticas com resolução 4K por 6K a partir de alvos de baixa resolução com reflexões detalhadas.

    A renderização de faces 3D possui inúmeras aplicações em domínios da videoconferência à realidade virtual, mas, embora a geometria possa ser inferida sem a IA, são necessárias muito mais informações para renderizar uma face em cenas arbitrárias.

    Para extrair essas informações, os pesquisadores capturaram os mapas de refletância no nível dos poros das canecas de 200 pessoas usando uma esfera de LED com 168 luzes e 9 câmeras DSLR. Eles então o usaram para treinar um modelo de IA – GANFIT – para sintetizar mapas realistas a partir das texturas, otimizando a “correspondência de identidade” entre a renderização e a saída.

    VB Transform 2020 Online – 15 a 17 de julho. Junte-se aos principais executivos de IA: registre-se para receber gratuitamente a transmissão ao vivo.

    Como outras redes adversárias generativas (GANs), o GANFIT é um modelo de duas partes que consiste em um gerador que cria amostras e um discriminador que tenta diferenciar entre as amostras geradas e as amostras do mundo real. Tanto o gerador quanto o discriminador melhoram suas respectivas habilidades até que o discriminador seja incapaz de diferenciar os exemplos reais dos exemplos sintetizados com uma precisão melhor que 50% esperada do acaso.

    Outro componente do pipeline AvatarMe melhorou as resoluções das texturas, enquanto um terço removeu a iluminação “pronta” introduzida pelo GANFIT. Um módulo separado previu a refletividade por pixel das estruturas da pele, como poros, rugas ou cabelos, a partir da textura iluminada, estimando até detalhes da superfície, como rugas finas, cicatrizes e poros da pele.

    Os pesquisadores dizem que, em experimentos, o AvatarMe não produziu artefatos nas renderizações finais e lidou com sucesso com poses e oclusões “extremas” como óculos de sol. A refletividade era consistente e, mesmo em ambientes diferentes, o sistema iluminava “realisticamente” os assuntos.

    O AvatarMe não está isento de limitações. O conjunto de dados de treinamento não contém muitos exemplos de sujeitos de determinadas etnias, levando a um desempenho ruim quando tenta reconstruir o rosto de indivíduos de pele mais escura. E a reconstrução facial não é completamente independente da fotografia de entrada – imagens bem iluminadas e de alta resolução produzem resultados mais precisos. No entanto, os co-autores afirmam que é o primeiro método para obter rostos “prontos para renderização” com qualquer imagem de retrato, incluindo esboços em preto e branco e desenhados à mão.

    O AvatarMe é apenas o mais recente sistema de IA que gera arte para automatizar o que era anteriormente um processo manual. Inicialização A Promethean AI emprega aprendizado de máquina para ajudar artistas humanos a criar arte para videogames. Pesquisadores da Nvidia recentemente demonstraram um modelo generativo que pode criar ambientes virtuais usando trechos de vídeo. Em outros lugares, o aprendizado de máquina foi usado para resgatar texturas de jogos antigos em títulos retrô como Final Fantasy VII e The Legend of Zelda: Twilight Princess e gerar milhares de níveis em jogos como Doom do zero.


    Artigos Recentes

    Este minúsculo SSD portátil de 480GB custa US $ 40 na Black Friday – economize US $ 110!

    O Digital Trends pode ganhar uma comissão quando você compra por meio de links em nosso site. Se você estiver comprando um novo telefone,...

    Tratando seu estresse com tecnologia de IA

    Ansiedade, estresse, pensamento excessivo e trauma são palavras comumente usadas para descrever pessoas que sofrem de transtornos mentais que surgem por sobrecarga de...

    Guia de presentes: 5 presentes de tecnologia sólida para ajudar a diminuir o estresse e aumentar o sono

    Bem-vindo ao Guia de Presentes de Natal 2020 do TechCrunch! Precisa de ajuda com ideias para presentes? Nós estamos aqui para...

    Supercell investe $ 2,8 milhões na 2Up, um estúdio cooperativo de jogos móveis

    A Supercell está investindo $ 2,8 milhões no estúdio de jogos da Nova Zelândia 2Up Games, que está trabalhando em um jogo móvel...

    Artigos Relacionados

    DEIXE UMA RESPOSTA

    Por favor digite seu comentário!
    Por favor, digite seu nome aqui