Facebook开发实时,交互式VR头像

霍林郭勒网 2021-08-12 12:19:03

在竞标中,使虚拟现实(VR)经验非常可信,Facebook现实实验室(FRL)的研究人员已经开发出一个名为“Codec Avatars”的革命系统,它为VR用户提供了与他人互动的能力,同时恰好代表生活类似的头像。实时动画。

“我们的作品表明,从Facebook的研究科学家研究科学家的研究科学家,可以精确地动画密集地安装在VR耳机上的摄像机的照片仪器头像。

研究人员突出了一个耳机,具有最小传感器,用于面部捕获,它们的系统能够在VR中进行双向,真实的社交互动。

该团队表示,VR系统可以通过精确跟踪用户“使用最小的耳机安装的摄像头(HMC)”来追踪用户的“实时面部表达式”,使VR系统具有高度详细的个人形象。

“通过将这些转换的图像与每个像素进行比较 - 不仅仅是稀疏面部特征 - 以及3D化身的渲染,”魏。

“通过可微分渲染,我们可以从跟踪耳机和3D化身的状态之间映射图像之间的映射。威西添加了映射后,我们训练一个神经网络以预测从最小的相机图像中的面部参数,“威。

除了在VR中的动画中的动画,Facebook的团队还在构建系统,这些系统可能使人们能够快速,轻松地从几个图像或视频中创建其头像。

Facebook团队将在“SigGraph 2019”上展示其VR实时面部动画系统,该系统将在7月28日至8月28日至8月28日至8月2日之间举行。

研究人员将基于生成的对冲网络(GAN)的人工智能(AI)技术进行,该网络执行一致的多视图图像样式转换,以自动将HMC红外图像转换为看起来像呈现的化身的图像,但是具有相同的面部表情VR用户。