×

登录vrpinea

2019年11月12日

创建脸部3D模型,谷歌让你在虚拟世界里摘掉头显!

作者:VRPinea

该文章首发于2017年3月7日


Owlchemy实验室LIV这样的创业公司尝试简化图像捕获过程,并获取更高质量的图像,但现有的图像捕捉方法都受到一个障碍的限制。人体最富有表现力的一部分,人们的,往往无法被捕捉成功与虚拟世界进行交互时,用户需要时刻想象人的表情。

 

1.jpg

 

然而谷歌已经展示了一些令人印象深刻的研究,这些研究或将使图像捕捉技术更上一层楼。利用包括改良的HTC Vive和SMI眼动追踪的一系列技术,谷歌将把你的脸重新数字化,用它替代你的脸被头显所遮住的部分

 

2.gif

 

这项成果ResearchDaydream实验室和the YouTube团队共同的达成的一篇深入研究该技术的博客文章中,解释了它是如何工作的

 

3.gif

 

这个技术背后的核心理念是使用用户脸部的3D模型来替代被头显遮住的脸从而创建一个“摘掉头显”的假象

 

4.jpg

 

首先,其将为用户创建个性化的3D脸部模型,这种3D脸部模型被称为注视点动态外表其次,初始校准步骤需要用户坐在彩色深度相机和显示器前方,然后让用户用双眼追踪显示器上的标记。

 

5.jpg

 

我们通过使用这个一次性校准程序(通常需要不到一分钟),来获得用户3D人脸模型,并得到一个数据库。该“注视点”数据库将包括面部图像、不同眼睛注视方向和眨眼等数据该数据库将动态地合成用户脸部,并生成所需的注视点,从而使合成的脸看起来自然生动

 

6.jpg

 

该项目的成员,包括研究员Vivek Kwatra和软件工程师Christian FruehAvneesh Sud等都相信该项目未来将能够“加强VR中用于沟通和社会互动的多样化应用,比如VR视频会议多人VR游戏”。

 

本文由uploadvr刊发,属VRPinea原创编译文稿,转载请洽:brand@vrpinea.com


评论



返回
上层
返回
顶部