编译/VR陀螺

近日，美国专利商标局正式授予苹果公司一项专利，该专利涉及允许iPhone成为混合现实头显的输入设备。更具体地说，允许用户看到他们的iPhone显示屏，并在计算机生成的现实（CGR）环境中与之互动（如游戏环境）。然后，iPhone可以作为一个3D控制器、3D指针、用户界面输入设备等使用。

在他们的专利背景中，苹果公司指出，为了使用户与电子内容进行互动，可能希望使用户能够通过单独的现实世界的设备，如iPhone（或iPad）的触摸屏提供输入。然而，现有系统无法充分追踪智能手机或平板电脑相对于CGR环境中内容的位置。这就是苹果公司这项专利要解决的问题。

苹果公司的专利涵盖了设备、系统和方法，为使用多个电子设备与电子内容进行互动提供了改进的用户界面。一些实施方案涉及一个第一设备，如头戴式设备（HMD），它有一个图像传感器（如摄像头）和一个或多个显示器，以及一个第二设备（如iPhone），它有一个显示器。

在第二设备（iPhone）的显示屏上显示一个标记，第一设备会根据该标记确定第二设备与第一设备的相对位置和方向。

在一些实施方案中，标记物是包含纹理/信息的图像，该信息可使图像被检测到并使确定图像相对于摄像头的姿态成为可能。

在一些实施方案中，可根据第二设备的相对位置和方向产生控制信号。例如，第一设备使用第二设备的位置和方向，使第二设备（iPhone）被用作3D控制器、3D指针、用户界面输入设备等。

图源：patentlyapple

苹果公司的专利图2说明了用户在佩戴混合现实头显时能够在计算机生成的现实（CGR）环境中使用iPhone作为输入设备。

苹果公司的专利图3A说明了图2中提到的由物理第二设备#130（iPhone）显示的标记#310。在一些实施方案中，用户无法查看其iPhone的物理显示屏，因为用户沉浸在虚拟场景#205中。因此，在一些实施方案中，iPhone可在其物理显示屏上显示一个标记（#310），以方便头戴式显示器（HMD）对iPhone的追踪。

在一些实施方案中，该标记可作为HMD的参考点，以准确跟踪iPhone的位置和旋转。

在一些实施方案中，标记物(#310)是包含纹理/信息的图像，该信息可使图像被检测到并使确定图像相对于摄像头的姿态成为可能。

在一些实施方案中，标记物可以是一个图案，也可以是一个单一指示符。例如，该标记可以是网格、交叉划线、象限标识符、屏幕边界等。

欲了解更多细节，可查阅苹果公司这项专利号为11,036,284的授权专利。

来源：patentlyapple