虚幻的新iPhone应用程序使用Face ID传感器进行实时运动捕捉

这是iPhone的TrueDepth传感器阵列的另一个罕见的杀手级应用。

虚幻引擎开发商Epic Games发布了Live Link Face，这是一个iPhone应用程序，它使用电话中的前置3D传感器对视频游戏，动画或电影等3D项目中的面部动画进行实时运动捕捉。

该应用程序使用Apple的ARKit框架和iPhone的TrueDepth传感器阵列中的工具，将观看手机的演员将实时运动捕获流传输到附近工作站上运行的虚幻引擎中的3D角色。它捕获面部表情以及头部和颈部的旋转。

据Epic 宣布该应用程序的博客称，Live Link Face可以一次流传输到多台机器，并且“强大的时间码支持和精确的帧精度可实现与其他舞台组件(如摄像机和人体动作捕捉)的无缝同步” 。用户可以从手机的前置摄像头获取带有原始时间的CSV原始混合形状数据和MOV，并带有时间码。

对于许多人来说，iPhone的TrueDepth传感器阵列似乎是解决问题的一种解决方案-触摸ID可以在大多数人的早期iPhone中正常使用，除了Face ID之外，该技术没有很多明确的应用。当然，有Animoji，很多人喜欢它们-但大多数人不会说他们单枪匹马地证明了这项技术的合理性。

但这是一个明确的卖点，尽管是针对少数人群的：独立游戏开发商和电影制片人可以在iPhone上使用类似的应用程序进行动作捕捉，通过真实的人类演员的面部表情和其他动作来使虚拟角色栩栩如生。传统上，这涉及到设备昂贵的工作室，除了大公司以外，其他人都无法企及。

当然，iPhone传感器可以管理的动作捕捉不如AAA游戏开发工作室或大型电影所使用的动作捕捉准确，因此那些高端工作室不会将其装备齐全的Mo-Cap录音室用于iPhone。但是现在，个人创建者和较小的团队可以做一些以前成本过高的事情。

但是，从本质上讲，这并不是真正的消费者用例。到目前为止，这些传感器主要已被Apple和第三方应用程序开发人员用来使AR应用程序和照片滤镜更准确。

10岁时团结一致：无论好坏，游戏开发从未如此简单

苹果最近在iPad Pro上增加了一个激光雷达传感器，并且在互联网上流传着很多谣言，称它也将成为顶级iPhone机型。尽管iPad Pro的后传感器使用的技术与正面的TrueDepth阵列不同，但它可以产生相似的结果。苹果已经展示了iPad Pro的后部传感器，可以记录人的动作捕捉-尽管是人的整个身体，而不是他们的脸。

对于那些不熟悉的人来说，虚幻引擎作为一种图形引擎开始使用，该图形引擎被Triple-A视频游戏工作室使用，用于战争机器和 质量效应之类的游戏 ，并且随着时间的流逝，它被独立开发者以及在电影制作，建筑等其他情况下使用和设计。它可以与另一个流