编译/VR陀螺
一项由Facebook重点研究让人们通过意念打字的计划已经结束,今天发表了新的发现。不过Facebook Reality Labs研究主管Sean Keller表示,他们不会完全放弃头戴式脑机接口系统,但它计划将该软件开源并与外部研究人员共享硬件原型,同时结束自己的研究。
Project Steno是Facebook与加州大学旧金山分校张氏实验室之间的一项多年合作项目,旨在创建一个能将大脑活动转化为文字的系统。发表在《新英格兰医学杂志》上的一篇新研究显示了该技术有帮助语言障碍群体的潜力。
图源:Facebook Reality Labs
但在研究的同时,Facebook明确表示,它正在放弃商业化头戴式脑机设备的想法,转而打造腕带设备。新的研究对大众市场的技术产品没有明确的适用性,而且在一份新闻声明中,Facebook表示它正在"重新关注"其优先事项,不再关注头戴式脑机接口。
Facebook明确指出他们对开发需要植入电极的产品没有兴趣:"虽然我们仍然相信头戴式光学BCI技术的长期潜力,但我们已经决定将我们当前的努力重心集中在一个不同于神经接口的方法,该方法的上市路径更短。"
张氏实验室正在进行的研究涉及使用植入式脑机接口(BCI)来恢复人们的语言能力。这篇新论文的重点是一位在16年前患中风后失去说话能力的参与者。实验室为该男子安装了可检测大脑活动的植入式电极。然后该男子一年中一共花了22个小时,训练系统来识别特定的模式。在该训练中,他将尝试从50个单词的词汇集中说出单个词汇。在另一个训练课程中,他试图用这些词来造句,其中包括基本动词和代词(如"am"和"I"),以及具体的有用名词(如"眼镜"和"电脑")以及命令(如"yes "和"no")。
这种训练有助于创建一个语言模型,当该男子想说特定的词时,即使他实际上无法说出这些词,也能做出反应。研究人员对该模型进行了微调,以预测他正在思考的是50个单词中的哪一个,于是整合了一个类似于预测智能手机键盘的英语语言模式概率系统。研究人员报告说,在最后的试验中,该系统的解码速度中位数为每分钟15.2个单词,算上错误,或只有正确解码的单词,每分钟解码12.5个单词。
张氏实验室在2019年和2020年发表了早期的Project Steno研究,表明电极阵列和预测模型可以创建相对快速和复杂的意念打字系统。以前的许多打字方案涉及用大脑植入物在屏幕上的键盘上用意念推动光标,尽管其他一些研究人员已经尝试了可视化手写等方法。该实验室的早期研究涉及对能正常说话的人的大脑活动进行解码,而这篇最新的论文表明,即使受试者不能说话或小声说话,它也能发挥作用。
研究中未投入使用的脑机设备
图源:Facebook Reality Labs
加州大学旧金山分校神经外科主任Eddie Chang说,下一步是改进该系统,并与更多人进行测试。"在硬件方面,我们需要建立具有更高数据分辨率的系统,以更快地记录更多来自大脑的信息。在算法方面,我们需要有能够将这些来自大脑的非常复杂的信号翻译成口语的系统,不是文字,而是实际上是口头的、可听的口语。主要优先事项是大大扩展词汇量。"
今天的研究对于那些没有使用键盘和其他现有服务的人来说是有价值的,因为即使是有限的词汇量也能帮助他们更容易地进行交流。但它远远没有达到Facebook在2017年设定的雄心勃勃的目标:一个非侵入性BCI系统,可以让人们每分钟输入100个单词,与他们在传统键盘上所能达到的最高输入速度相当。
加州大学旧金山分校的最新研究涉及植入式技术,并没有接近达到这个数字,甚至没有达到大多数人在手机键盘上所能达到的速度。这预示着一项技术的商业前景不容乐观,比如Facebook Reality Labs以原型形式发布的外部头带,可以通过光学方式测量脑氧水平。
Facebook在2019年收购了肌电图(EMG)腕带公司CTRL-Lab,为AR和VR提供了另一种替代控制选项。"我们仍处于研究基于手腕肌电图(EMG)潜力的早期阶段,但我们相信它将成为AR眼镜的核心输入。
来源:theverge
投稿/爆料:tougao@youxituoluo.com
稿件/商务合作: 六六(微信 13138755620)
加入行业交流群:六六(微信 13138755620)
元宇宙数字产业服务平台
下载「陀螺科技」APP,获取前沿深度元宇宙讯息