脸书将逼真的人脸跟踪头像视为VR未来的关键

数十人在宾夕法尼亚州匹兹堡的脸书现实实验室工作，研究可以在21世纪重新定义交流的超现实化身。

自2015年以来，我一直在与卡耐基梅隆大学虚拟现实研究副教授亚塞尔谢赫通话。本周，Sheikh在科技博客postre上提供了该公司对超现实虚拟角色的研究细节。打完电话后，我通过电子邮件联系了脸书，希望得到澄清。

邮件中解释说：“脸书现实实验室匹兹堡可以容纳近100人。“为了适应团队的成长，FRL匹兹堡将在今年晚些时候搬到匹兹堡更大的大楼。”

这意味着对球队未来的巨大投资。这个小组并不是脸书唯一一个研究更真实和个性化头像的小组。需要明确的是，脸书表示，这项技术要在消费者的耳机中实现，还需要“几年时间”。

本周脸书详细介绍的阿凡达系统叫做“编码阿凡达”。在过去的几年里，人们一直在脸书和Oculus开发者大会上谈论这项工作。然而，这些最新的细节可以让我们对这项工作及其发展道路有一个深入的了解。也许有一天，这项研究可以应用于运输产品。

为了创建每个头像，脸书使用了一个特殊的捕捉工作室，它由132个指向中心的摄像头组成。几个小时后，当一个人做出各种面部表情时，系统会生成一张独特逼真的头像脸。另一个新建立的系统捕捉尸体。

脸书在邮件中解释说，“目前，要创建逼真的虚拟角色，需要拍摄大量高质量的音频和视频，供研究人员在匹兹堡的脸书现实实验室使用高度定制的摄像头和麦克风系统。”“这些数据被用来训练人工智能系统。有一天，用户可以通过几个快照或几个视频，快速轻松地构建自己的编解码器头像。”

由于显而易见的原因，目前的流程无法与消费者合作，因此研究的主要重点是使用机器学习来生成这些细节的体现。也许有一天你在脸书或Instagram上现有的照片就足够了。我问谢赫，他是否试图将自己的照片从脸书上传到脸书的系统，看看他是否能从中创建一个头像。他说，在尝试之前，他们需要更多地了解光如何与皮肤相互作用。

“当我们做这种工作时，我们希望确保得到用户的同意，”他补充道。

为了驱动这些替身，脸书在头戴式捕捉研究设备中建立了一个带有摄像头的系统。——在机头间隙中包括一个摄像头。

VR头盔内部比较暗，你也不想让灯光把用户弄瞎。这些特征可以被不可见的红外线照亮。这些类型的光用于Oculus Rift“星座”位置跟踪系统，并且经常用于眼睛跟踪。脸书在这里使用同样的技术来说明捕获系统的特点。

脸书在加州的索萨利托有一个独立的团队，他们正在研究一种不同的方法来制作逼真的替身。

脸书解释：“这包括探索基于物理的虚拟化身，它可以与任何虚拟环境交互，并结合生物力学、神经科学、运动分析和物理驱动的模拟等基础研究。”“这项技术仍然依赖于实时数据采集，就像编解码器的体现一样，但它并不驱动神经网络的实时传感器数据，而是一个受人体解剖学启发的基于物理的模型。”

脸书应该在今年晚些时候分享更多信息。

脸书Oculus多年来一直在研究人脸跟踪和逼真的头像。在2015年的SIGGRAPH会议上，Oculus与南加州大学合作进行的研究揭示了一个硬件原型，其笨拙的手臂与开发工具包相连。

耳机泡沫内衬的额外传感器会在摄像头被遮挡看不见时读取表情。

匹兹堡的FRL没有参与早期的研究。脸书正在“寻找可能的解决方案”，谢赫分享了一些需要发生才能使其主流化的“奇迹”。他说，总的来说，他们的目标是最终将技术转移给产品团队。然而，他提醒说，他们首先需要弄清楚如何用最少的信息制作逼真的头像。

谢赫说：“完成身体其他部分是另一个奇迹。”

在消费产品中，阿联酋航空团队和其他人在脸书创造的高质量头像将从根本上改变沟通的本质。我们将不再使用有限的表达来谈论卡通近似。无论多远，我们都会和人类交谈。

一些研究人员和科学家认为，再现人类细微表情的问题是虚拟现实中最困难的问题之一。然而，有一天，有了这些虚拟角落

这项技术的发展也带来了巨大的风险。如果你的外表和行为举止能被别人穿得像戏服一样，那么数字化模仿的风险是巨大的。

“沟通的基础是信任，”谢赫说。“你必须绝对肯定是我。”

谢赫通过电子邮件更详细地解释了这一点:

这是早期的研究，随着我们继续开发这项技术，我们正在务实地考虑我们可以实施的保护措施，以打击对化身的滥用。例如，我们正在探索如何确保你的头像在一个真实的账户中是安全的。我们如何在我们的平台上使用真实身份将是关键的一部分，我们已经讨论了未来设备的几个安全和身份验证选项。显然，我们离这类耳机技术还有一段距离，但我们现在想要思考解决方案。

　　免责声明：本文由用户上传，与本网站立场无关。财经信息仅供读者参考，并不构成投资建议。投资者据此操作，风险自担。 如有侵权请联系删除！