Microsoft lança modelo de difusão para avatares do Metaverso

A técnica de aprendizado de máquina 3D Avatar Diffusion pode gerar avatares 3D a partir de uma única imagem 2D do rosto de uma pessoa.

A Microsoft criou um modelo de difusão que pode transformar uma única imagem bidimensional (2D) de um rosto humano em um avatar tridimensional (3D). Uma equipe de pesquisadores da Microsoft Research criou o modelo de difusão, que foi descrito em um artigo publicado na revista arXiv.

O avatar 3D pode então ser usado para criar uma experiência de realidade virtual (VR) ou realidade aumentada (AR) ou  simplesmente para fornecer uma visão 3D realista da pessoa para jogos ou outros fins.

3D Avatar é baseado em um algoritmo de máquina

O 3D Avatar Diffusion é construído sobre um algoritmo de aprendizado de máquina conhecido como modelo de difusão. Os modelos de difusão podem produzir novos dados que são semelhantes aos dados de treinamento porque são modelos generativos. O ADM é o primeiro modelo  de difusão a ser capaz de criar um avatar 3D realista a partir de  uma única imagem 2D, embora modelos de difusão tenham sido usados no passado para criar imagens 3D a partir de imagens 2D.

Os pesquisadores usaram um conjunto de dados de mais de 200.000 modelos de rosto 3D para treinar o modelo. Os rostos no conjunto de dados vieram em uma ampla gama de tons de pele, cortes de cabelo e características faciais. O ADM foi então capaz de criar um metaverso realista a partir de uma única imagem 2D. No entanto, depois de aprender a relação entre a imagem 2D e o modelo de face 3D.

Modelos generativos criam automaticamente avatares 3D

Este estudo sugere um modelo generativo 3D para a geração automática de avatares digitais 3D. No entanto, eles são representados como campos de radiância neural com modelos de difusão. A dificuldade em desenvolver os recursos ricos necessários para avatares de alta qualidade decorre das proibitivas demandas de memória e processamento associadas ao 3D. A rede de difusão de distribuição (Rodin) é recomendada pelos desenvolvedores para resolver esse problema.

Anteriormente, Bill Gates afirmou que sua antiga empresa estava desenvolvendo o software de escritório Teams com avatares 3D e outros recursos amigáveis ao metaverso, agora que a Microsoft está trabalhando com Mark Zuckerberg e a Meta para tornar a rede social Workplace deste último para empresas compatível com o Teams. Além disso, as equipes podem até ter uma rampa clara para o metaverso.