【编译：VR陀螺】

近日，Facebook分享了公司在腕式设备方向的研究，据介绍，该腕式设备将用于高保真度的手指追踪与触觉反馈功能。

图源：uploadvr

今年2月，媒体Information曾报道Facebook会在2022年发布SmartWatch，并于次年发布第二代产品。Facebook从事AR/VR交互与R&D输入的负责人Sean Keller对公司的手腕设备做出如下描述：

“腕带与手表现已被广泛使用。手腕上的设备可作为计算、电池以及无线电的平台，充当具备显示屏、触摸界面，以及丰富触觉反馈的完整输入与输出的集线器，并且广泛支持各类传感器。”

手部神经信号追踪

Oculus Quest头显可通过头显的摄像头支持手部追踪功能。该功能需要在光线充足的条件下使用，而且会产生一定程度的延迟。当用户双手交叠时，头显无法实现追踪。

更高质的摄像头、深度传感器以及运行速度更快的芯片有助于提高头显的手部追踪功能。即便如此，在一些场景下，头显仍然无法追踪一个或多个手指。

因此，Facebook还在进行另外一种追踪方式的研究，即通过读取手腕信号进行追踪，采用该方案甚至可以实现在手部发生动作前感测其动作。Facebook于2019年初为类似设备提出专利申请，从事类似研究工作的纽约创企CTRL-Labs于2019年底被Facebook收购。

Facebook负责指导神经运动接口研究的Thomas Reardon表示，大脑很大程度上是对手部进行控制，而不是对身体其他部分。他声称最近所取得的研究突破能够解码个体神经元的活动，以“尽可能无限的对机器进行控制”。这意味着手部交互可以达到令人难以置信的毫米级精度。

图源：uploadvr

据了解，由于设备追踪的是神经信号而不是真实的手指，因此用户可简单地通过“想”移动手指让虚拟手指移动。在Reardon展示的一小段视频中，一位天生缺少一根手指的体验者进行虚拟手部的控制，可以看到，追踪其手部动作的虚拟手指是完整的。

值得注意的是，该追踪方案对个人数据的收集可能会被视为很严重的个人隐私问题：

“类似这样的神经数据属于私人信息，因此我们将此视为研究的一部分。如何处理这些个人信息，做到以人为本的提前下让用户参与体验是需要考虑的问题。我想说，作为科学家，我们会对公众严格遵守透明性原理，向人们解释我们为什么要使用这些数据，这些数据是如何被使用的，以及在哪些用户体验中启用了这些信息。”

基于腕部的触觉反馈

在谈到Facebook长期目标时，AR/VR交互与R&D输入负责人Sean Keller描述未来会像抽出“一双柔软、轻巧的触觉手套。”

第一次听说Facebook从事相关研究，还是在2019年世界触觉会议时Facebook对“Tasbi”展示时。Facebook负责科学研究的经理Nicholas Colonnese对从腕部设备输送触觉反馈的潜力进行了讨论。

图源：uploadvr

我们直觉上会认为手腕上的感觉并不太适用于基于手指的虚拟交互，但Colonnese表示感官替代可以做到这一点，大脑会将视觉与触觉刺激理解为同一回事。

图源：uploadvr

“我们利用具备Tasbi振动与挤压的触觉功能在VR与AR中进行了大量虚拟交互实验，比如对按钮进行推、拉、转等动作，以及在空间中移动虚拟物体。还尝试了很多非典型案例，比如爬山、拉弓等。我们进行这些测试，是想知道Tasbi的振动与挤压反馈能否让人感觉正在与这些物体进行自然的交互。令人惊讶的是，得益于集合了身体多重信息的感官替代，我们得到了肯定的答案。”

Colonnese在与AR眼镜配对时，描述了更多常见案例以验证Tasbi高保真触觉反馈，例如步行导航时的振动反馈等。

来源：uploadvr