编译/VR陀螺

近日，美国专利商标局公布了苹果公司的一项专利申请，主要涉及未来的混合现实头显，该头显具有新集成的肢体和眼动追踪功能。这样，当用户在虚拟世界或增强现实模式中触摸游戏中的一个按钮或在iPad上选择一个图标时，就能保证触摸的准确性。

事实证明，在试图确定一个准确的位置时，仅靠手部追踪是远远不够准确的。苹果的专利向我们介绍了他们的新解决方案。苹果公司还在他们的眼动追踪系统中直接引入了一个独特的隐私功能。

苹果公司在其专利摘要中指出，有一些系统会利用手部追踪，以确定增强现实（AR）或虚拟现实（VR）环境中的空间选择点。例如，手部追踪确定了与用户的手相关的手部追踪区域，系统可以选择手部追踪区域的中心点作为空间选择点。

然而，由于手部追踪的仍然不够准确，空间选择点往往不符合用户手的实际位置。在某些情况下，空间选择点和实际位置之间的偏移会导致系统在确定用户试图选择多个显示的虚拟元素中的一个时出现错误。

在这种情况之下，专利中提出了各种实施方案，包括根据肢体追踪信息和眼动追踪信息在计算机生成的现实（CGR）环境中定位一个用户控制的空间选择器。

通过使用肢体追踪信息和眼动追踪信息，电子设备对用户是否正在选择虚拟物体的评估比以前不使用眼动追踪系统时更准确。

在一些实施方案中，电子设备会确定与四肢追踪和眼动追踪相关的各自置信度，并使用各自的置信度来定位用户控制的空间选择器。

例如，眼动追踪特征包括CGR环境的特征（例如，CGR环境的亮度水平、CGR环境和CGR物体之间的对比度水平、CGR物体被选择的可能性）、用户是否在看外围、用户的眼睛注视位置的历史数据和/或类似的数据。

在一些实施方案中，电子设备确定肢体追踪特征（例如，用户拿着铅笔，用户的肢体在颤抖等情况），并使用肢体追踪特征来确定与肢体追踪数据相关的置信度。

图源：patentlyapple

苹果公司的专利图1是便携式多功能设备（如iPad）的举例框图，该设备包括新的眼动追踪传感器和眼动追踪控制器，以及新的四肢追踪传感器和相关控制器；图3B是根据一些实施方案，基于四肢追踪和眼动追踪在CGR环境中定位用户控制的空间选择器的一个例子。

在苹果公司的专利图3D中，我们看到了图3B中所示的iPad上图标的分解视图。iPad（或HMD电子设备#320）实现了与右手（#314）的手指（#331）有关的眼动追踪功能，以确定CGR环境的第二个候选虚拟空间位置（#342）。该系统旨在准确评估用户在佩戴HMD时选择什么图标（或其他负担物，如游戏中的按钮）。

苹果公司指出，眼动追踪传感器检测iPad（电子设备）用户的注视点，并生成指示用户眼球注视点的眼动追踪数据。在各种实施方案中，眼动追踪数据包括指示用户在显示面板上的固定点（例如，视点）的数据，例如头戴式设备（HMD）内的显示面板，或平视显示器内的显示面板等。

肢体追踪传感器获得指示用户肢体位置的追踪数据。例如，在一些实施方案中，肢体追踪传感器对应于手部追踪传感器，该传感器获得指示用户在CGR环境中的手或手指位置的手部追踪数据。

在一些实施方案中，肢体追踪传感器利用计算机视觉技术，根据相机图像估计肢体的姿势。

苹果公司后来指出，在一些实施方案中，图3B所示的电子设备#320对应于头戴式设备（HMD），该设备包括显示CGR环境的集成显示器（例如，内置显示器），如AR环境或VR环境。在一些实施方案中，电子设备320包括一个头戴式外壳。

在各种实施方案中，头戴式外壳包括一个连接区域，另一个具有显示屏的设备可以连接到该区域。

在各种实施方案中，头戴式外壳的形状是设计用于接收另一个包括显示屏的设备(例如，图2中所示的电子设备220)的容器。例如，在一些实施方案中，电子设备会滑入/卡入或以其他方式附着在头戴式外壳上。

图源：patentlyapple

虽然苹果公司最终会有不同的高端和低端的HMD解决方案，但苹果公司在上述专利中提到的内容与他们以前的专利有关。例如下面专利图4是一个方框图的例子，该系统#410用于在CGR环境中基于肢体追踪和眼动追踪定位用户控制的空间选择器。

图源：patentlyapple

苹果专利图5是基于四肢追踪和眼动追踪在CGR环境中定位用户控制的空间选择器的方法#500的流程图。在各种实施方案中，该方法或其部分是由HMD或其他设备（iPad、iPhone）执行。

除了技术上面的解决方案，苹果还探讨了未来眼动追踪系统中的隐私问题。苹果公司指出了以下几点：

"在各种实施方案中，电子设备包括一个隐私子系统（上文图1的#170），该系统包括一个或多个与用户信息相关的隐私设置过滤器，例如包括在与用户相关的眼睛注视数据和/或身体位置数据中的用户信息。

在一些实施方案中，隐私子系统选择性地防止或限制电子设备获得和/或传输用户信息。

为此，隐私子系统接收来自用户的用户偏好和/或选择，以响应对用户的提示。在一些实施方案中，隐私子系统防止电子设备获取和/或传输用户信息，除非并且直到隐私子系统从用户那里获得知情同意。

在一些实施方案中，隐私子系统会对某些类型的用户信息进行匿名化（例如，扰乱或掩盖）。例如，隐私子系统会接收用户的输入，并指定隐私子系统匿名化用户的信息类型。

再比如，隐私子系统可以在用户未指定（自动）的情况下，对可能包括敏感和/或识别信息的某些类型的用户信息进行匿名处理。

苹果这项专利申请号为20210216146的专利最初于2021年1月提交。

来源：patentlyapple