苹果又发新专利：未来Apple TV可进行AR视频聊天

在今年九月份Tim Cook和美国广播公司的独家访谈中，他提到“增强现实可以让我们两个人在谈话的时候，能从视觉上分享一些虚拟的物体，比如共同看到我们正在谈论的东西，或者是另一个参加讨论不在场的人，增强现实对面对面交流可以有很多很酷的提升。AR还需要一段时间来走上正道，我认为这些尝试很有意义。“

虽然库克这些看法很有趣，确实很混沌不清，只提出了这个概念两个人面对面交流的时候能共同看到一些虚拟物体来增强交流。今天，美国专利商标局宣布，苹果又发起了一项专利申请，是一个虚拟交互式通知栏系统，并且可能会用在未来苹果TV的AR用户体验上面，看来库克对这个畅想可能是打算玩儿真的了。

虽然这项虚拟交互系统专利看起来更像是基于iPad等iOS设备的，但在专利中苹果花了大量工作讨论了虚拟交互系统在未来苹果TV上的应用。

专利中尤其明确了“这个电子设备能够有选择的在屏幕上显示通知栏，包括物体的图像。通知栏和图像可以在另一个不同地点的不同设备行出现，如下图。“ 比如这个通知栏在第一个用户家中的电视屏幕上显示的，也会显示在另一个用户的电视或其他显示设备上。

苹果详细解释了上图展示的工作流程，用户A和用户B可能在视频聊天，然后用户A手中拿了一个东西，在用户A的小屏幕（628A）和用户B的视频聊天窗口（606B）里可以看到。然后A的设备可以识别A手里拿的这个物体，然后把物体的图片显示在通知栏上，在A和B的设备上都可见，就这样，A和B能在视频的时候看到同样的虚拟通知栏，以及里面显示的物体。

为了让用户能通过电视进行视频聊天，上图还显示了苹果TV会和一个外接摄像头耦合，并且这个摄像头还可能装有一些列光学传感器，比如RGB图像传感器、图像深度传感器、红外（IR）图像传感器等，并且还能识别一些空中的手势动作。

苹果还明确了具体是怎样的手势“电子设备可以接收读取空中手势，来拒收、增加以及替换图像。这些手势包括用户举起手，掌心面对摄像头，然后向上下左右方向移动手掌。“ 如下图。

这个相机还能让用户扫描他们拿着的物体，并录入系统中，然后传送到他们视频聊天对象的虚拟通知栏上进行分享。

这个系统的整个框架如下图

苹果这项专利是去年第三季度开始申请的，专利号20160344972，今天才被美国专利商标局发布。看来库克对于文章开头提到的AR增强面对面交流的设想并非空谈。