无触觉的打字,

神经植入可以让瘫痪的人通过想象写作来打字

一个瘫痪的人每分钟能打出90个字符,准确率99%。

一个艺术家的系统示意图。
扩大 /一个艺术家的系统示意图。
自然

埃隆·马斯克(Elon Musk)的Neuralink已经成功了波澜在神经植入的技术方面,但它还没有展示我们如何实际使用植入。目前,证明植入物的前景仍掌握在学术界手中。

本周,学术界提供了一个令人印象深刻的例子,展示了神经植入的前景。通过植入,一个瘫痪的人仅仅通过想象他是在手写这些字符,就能每分钟打出大约90个字符。

梦是做

此前,通过植入设备为瘫痪患者提供打字能力的尝试包括给受试者一个虚拟键盘,让他们用意念操纵光标。这个过程是有效的,但很慢,它需要用户的全部注意力,因为受试者必须跟踪光标的进度,并决定何时执行相当于按键的操作。它还要求用户花时间学习如何控制系统。

但是,还有其他可能的途径可以让角色从大脑中走出来,出现在纸上。在我们的写作思考过程中,我们形成了使用特定角色的意图,而使用植入来追踪这一意图可能会起作用。不幸的是,这个过程并没有得到很好的理解。

在这个意图的下游,一个决定被传递到运动皮层,在那里它被转化为行动。此外,还有一个意图阶段,在这个阶段,运动皮层决定它将形成字母(例如,通过打字或写作),然后将其转化为执行动作所需的特定肌肉运动。这些过程已经被更好地理解了,这也是研究团队进行新研究的目标。

具体来说,研究人员在一个瘫痪的人的前运动皮层中植入了两个植入物。这个区域被认为与形成动作的意图有关。捕捉这些意图比捕捉动作本身更有可能产生清晰的信号,动作本身很可能是复杂的(任何动作都涉及到多个肌肉),并取决于上下文(你的手相对于你正在书写的页面的位置,等等)。

当植入物在正确的位置时,研究人员要求参与者想象在一页纸上写字,并记录下他写字时的神经活动。

你说什么来着?

参与者的前运动皮层总共大约有200个电极。并不是所有的书都能提供写信所需的信息。但对于那些是,作者进行了主成分分析,确定了神经记录的特征,当想象不同的字母时,差异最大。将这些记录转换成二维情节,很明显,当书写单个字符时所看到的活动总是聚集在一起。而物理上相似的字符——例如p和b,或h、n和r——在彼此附近形成簇。

(研究人员还要求参与者使用逗号和问号等标点符号,并使用>表示空格和波浪号表示句号。)

总的来说,研究人员发现,他们可以以略高于94%的准确性破译适当的字符,但在神经数据记录后,系统需要相对缓慢的分析。为了让事情实时工作,研究人员训练了一个循环神经网络来估计每个字母对应的信号的概率。

尽管处理的数据量相对较小(只有242个句子的字符),但该系统运行得非常好。这个想法和出现在屏幕上的字符之间的延迟只有大约半秒,参与者每分钟能够产生大约90个字符,轻松地打破了之前的记录,即每分钟大约25个字符。原始错误率只有5%左右,而应用像打字自动更正这样的系统可以将错误率降低到只有1%。

这些测试都是用准备好的句子完成的。然而,一旦系统被验证,研究人员要求参与者键入自由形式的问题答案。在自动校正后,速度下降了一点(每分钟75个字符),错误上升到2%,但系统仍然工作。

甚至连原型都没有

正如研究人员自己所说,这“还不是一个完整的、临床可行的系统”。首先,它只在一个人身上使用过,所以我们不知道它对其他人会有多有效。这里使用的简化字母不包含任何数字、大写字母或大多数形式的标点符号。植入物的行为会随着时间的推移而改变,这可能是因为它们所读取的神经元的微小变化或疤痕组织的形成,所以系统必须定期重新校准——至少每周一次,以保持可容忍的错误率。

也就是说,与以前的植入驱动系统相比,该系统显示了非常显著的速度提升,而且准确性相当好。该系统还具有类似于触摸打字的潜力,用户不需要在视觉上专注于字母的制作,可以与用户周围的环境进行更正常的交互。字母问题也许可以通过使用研究人员设计的另一种字母表来部分解决,在这种字母表中,所有字母都由不同的笔画模式来定义。这里有很大的潜力。

这些实验也提醒人们,这些植入物具有更广泛的潜力,以及为什么公司可能开始发现这项技术值得商业化。

自然,2021年。DOI:10.1038 / s41586 - 021 - 03506 - 2对必须).

82年读者评论

  1. 很奇怪,也许相当于“大脑手语”的东西会让打字变得更容易。

    我已经很长时间没有写过长篇了,我不确定我是否能想到它;-)

    年代
    665个员额注册
  2. 引用:
    每分钟90个字符,准确率99%。

    我误以为这是每分钟90个单词,准确率99%,所以我多看了一眼,因为这比我平时打字的速度好(当我“热身”并集中注意力时,我可以以同样的准确率超过这个速度)。

    我非常失望,因为它实际上是在模拟写作,而不是真正挑选出我的想法,然后用一些花哨的AI把它们写在纸上,让它变得有说服力!


    entropy_wins写道:
    很奇怪,也许相当于“大脑手语”的东西会让打字变得更容易。

    我已经很长时间没有写过长篇了,我不确定我是否能想到它;-)

    年代

    我喜欢这个主意。我觉得我在想象自己写东西的速度其实很慢,但也许一个更快的“记谱法”可以加快速度。

    最后一次编辑ChronoReverse2021年5月12日星期三下午12:11

    2339个帖子|注册
  3. 引用:
    每分钟90个字符,准确率99%。

    我误以为这是每分钟90个单词,准确率99%,所以我多看了一眼,因为这比我平时打字的速度好(当我“热身”并集中注意力时,我可以以同样的准确率超过这个速度)。



    是的,我也看错了,就像“我的天”。无论如何都令人印象深刻。
    2988个帖子注册
  4. 这既神奇又可怕

    想象一下,在你有机会过滤之前,用你的大脑写邮件或短信!
    2014年发帖|注册
  5. 很久以前,在新闻组的谈话中。他是一个发帖者,他不像我们中的很多人那样频繁,但他的发帖似乎是经过深思熟虑的。我当然很期待他的职位,并认为他是小组中最理性的人之一。

    几年后,他的母亲上网告诉我们他去世了。我不知道其他人是否知道,但我不知道。他四肢瘫痪。这使我更加钦佩他。

    每当我读到这样的突破,我就会不由自主地想起他。他的名字叫泰罗·桑德。
    5268个帖子|注册
  6. 引用:
    每分钟90个字符,准确率99%。

    我误以为这是每分钟90个单词,准确率99%,所以我多看了一眼,因为这比我平时打字的速度好(当我“热身”并集中注意力时,我可以以同样的准确率超过这个速度)。



    是的,我也看错了,就像“我的天”。无论如何都令人印象深刻。



    我也一样。我打字的速度大约是每分钟60个字,但其中有30个是退格键。:(
    5268个帖子|注册
  7. theJonTech写道:
    这既神奇又可怕

    想象一下,在你有机会过滤之前,用你的大脑写邮件或短信!


    嗯,公平地说,我有时手写电子邮件或短信也不过滤。幸运的是,还有一个发送按钮。
    3177个帖子|注册
  8. 从科学的角度来说,这是一项突破性的成就,显示了BCI在恢复瘫痪患者功能方面的前景。我想在不久的将来,这项技术将改变一些人的生活。

    我还不清楚BCI是否能在不久的将来(未来10年)改善正常功能的人的生活。现在的语音听写系统非常好,可以以每分钟160字甚至更快的速度抄写讲话。我确实认为BCI最终将是革命性的,但这项技术应用于日常生活可能还需要几十年的时间。我怀疑BCI所能实现的矩阵式体验在我有生之年是否会出现,但希望我是错的。Gabe Newell对BCI的前景要乐观得多比我。
    916个帖子|注册
  9. 这真的很酷!
    想象一下那对瘫痪的人来说是什么感觉,重新获得少量的外部控制,也许还有对未来的一丝希望,他们的瘫痪可能会更容易控制。
    3177个帖子|注册
  10. 这是令人印象深刻。除了打字之外,也许它还可以与AR /眼镜系统一起使用,为那些失去了声音而不能使用手的人提供(思维)=>打字=>文本-语音转换。
    7972个帖子|注册
  11. 引用:
    每分钟90个字符,准确率99%。

    我误以为这是每分钟90个单词,准确率99%,所以我多看了一眼,因为这比我平时打字的速度好(当我“热身”并集中注意力时,我可以以同样的准确率超过这个速度)。



    是的,我也看错了,就像“我的天”。无论如何都令人印象深刻。



    我也一样。我打字的速度大约是每分钟60个字,但其中有30个是退格键。:(

    光标,Shift+新的光标位置。在退格键....上节省一些损耗我在写这篇文章的时候用了很多次退格键。
    4635个帖子|注册
  12. 引用:
    自动校正后,误差上升到2%


    你是说这比我手机上的自动纠错还好?
    1814个帖子|注册
  13. 疤痕组织的问题是我经常看到的与这类植入物有关的问题。这主要是实现过程的产物,还是由于身体试图拒绝探针而随着时间积累起来的东西,还是两者都有?
    3858个帖子|注册
  14. Nalyd写道:
    引用:
    自动校正后,误差上升到2%


    你是说这比我手机上的自动纠错还好?

    试着在没有自动纠错功能的触屏手机上写字。我有一个应用程序,有一个评论功能,没有自动更正。如果被迫在不自动更正和自动更正之间选择,我会在10次中选择11次。
    4635个帖子|注册
  15. 小errpr:
    “…这里使用的简化字母不包含任何数字、大写数字、……”
    也许应该用大写字母。
    177个帖子|注册
  16. 说真的,这让我想知道下一阶段的工作效率预期。一旦我成熟了,我就会将此视为另一个考虑因素,甚至雇主会为此提供补贴。

    不仅仅是像编码这样的高技术职位。许多CS职位需要一个最低的打字速度,并受益于更快,更准确的文档。如果它成功的话,可能还需要10年时间才能达到那样的一体化水平。
    5560个帖子|注册
  17. Nalyd写道:
    引用:
    自动校正后,误差上升到2%


    你是说这比我手机上的自动纠错还好?


    想象一下,你瘫痪了,你想做的就是咒骂别人,但你那该死的植入物一直在改变它,让它“躲开你!”那可真让人恼火。
    2627个帖子|注册
  18. andrewb610写道:
    Nalyd写道:
    引用:
    自动校正后,误差上升到2%


    你是说这比我手机上的自动纠错还好?

    试着在没有自动纠错功能的触屏手机上写字。我有一个应用程序,有一个评论功能,没有自动更正。如果被迫在不自动更正和自动更正之间选择,我会在10次中选择11次。


    当然。但“自动更正”并不确定(至少在iOS设备上是这样)这一点仍然让我很不爽。如果我看到了修改,但再输入一个字符,然后退格,他们不会提供相同的修改。

    他们可以!但我强烈怀疑他们目前的自动更正功能也被用于大规模训练人工智能来预测句子结构。在苹果数据中心的某个地方,它从我的每一个预测、每一个删除的更正、每一个重新输入的单词中学习到更多一点。
    321个帖子|注册
  19. Nowicki写道:
    说真的,这让我想知道下一阶段的工作效率预期。一旦我成熟了,我就会将此视为另一个考虑因素,甚至雇主会为此提供补贴。

    不仅仅是像编码这样的高技术职位。许多CS职位需要一个最低的打字速度,并受益于更快,更准确的文档。如果它成功的话,可能还需要10年时间才能达到那样的一体化水平。

    哦,文档。我应该抽出时间在我的代码段中这么做。
    4635个帖子|注册
  20. andrewb610写道:
    Nalyd写道:
    引用:
    自动校正后,误差上升到2%


    你是说这比我手机上的自动纠错还好?

    试着在没有自动纠错功能的触屏手机上写字。我有一个应用程序,有一个评论功能,没有自动更正。如果被迫在不自动更正和自动更正之间选择,我会在10次中选择11次。

    我明白你的意思。教学输入电话键盘是不需要自动修改的。

    另一方面,独裁有时会带来不良后果。
    3454个帖子|注册
  21. 资本数量……哈

    不过让人印象深刻
    13个帖子|注册
  22. theJonTech写道:
    这既神奇又可怕

    想象一下,在你有机会过滤之前,用你的大脑写邮件或短信!


    嗯,公平地说,我有时手写电子邮件或短信也不过滤。幸运的是,还有一个发送按钮。


    “抱歉,我想输入‘发送’这个词,我的神经接口把它解释为‘发送’命令……”
    4345个帖子注册|
  23. 我几乎写不出清晰的笔迹。我想知道这是否也适用于思考打字。

    我不知道你们怎么想,但我把手机改成了"建议"词。它不会取代我输入的内容,除非我真的去点击框里的新单词。
    5891个帖子|注册
  24. 我想知道是否有一天,人们可以想象“说”一个词,并将其翻译成书面文本或计算机生成的语音。
    已登记254个帖子
  25. 在可访问性环境之外,如果我能用手指在普通键盘上进行所有的常规输入,那将是一件非常酷的事情。但当我需要输入“∇”或“ε”时,我可以通过思考绘制角色来无缝插入,而不是记住alt-code或谷歌它或其他什么。
    5400个帖子|注册
  26. oldseeker写道:
    errpr
    “…这里使用的简化字母不包含任何数字、大写数字、……”
    也许应该用大写字母。


    Muphry定律罢工了!
    916个帖子|注册
  27. 当我第一次看到标题时,我想“终于!这是治愈文思枯竭的良药!”在阅读这篇文章时,它听起来很漂亮,但与我预想的不太一样。我很欣赏这种电脑幽默,因为这个人显然在写“你好,世界”。

    约翰Timmer写道:
    原始错误率只有5%左右,而应用像打字自动更正这样的系统可以将错误率降低到只有1%。


    是的,因为自动更正功能非常好。;)

    https://www.autocorrectfail.org/

    https://www.npr.org/2011/03/22/13473689…xts-go-bad

    那么,由错误的植入物导致的输入错误的单词会被称为“thinko”吗?好奇的头脑想知道!
    2712个帖子|注册
  28. 如果我有电线卡在我的大脑,它将是一个电极进入我的杏仁核....
    16251个帖子|注册
  29. *走进朋友家,发现了alexa*

    发送思想命令:Alexa订购2吨奶油玉米*
    5560个帖子|注册
  30. 嗯,现在杰瑞·瑞安的“集体”联想可以成为事实,我们所需要的是FDA批准这些设备和大规模生产,大规模植入和大规模互联网连接(跳过打字机步骤,直接进入战斗!)和全球思想和想法的淹没。

    对于立法者来说,这可能是最有趣的机会,展示他们对拒绝服务法律的最糟糕做法,以及自由和文明社会的限制。

    当然,微软可以推出一些“自动编辑”工具来保护新手免受“错误”的伤害,homegroup家庭包只要300.99美元!


    场景:

    1.家庭被完全植入并连接在一起,(就像其他“计划”一样,你放纵得越多,成本就越便宜…?)

    2.他们都会在某个下雨天聚在一起,参加一场头脑风暴派对。

    3.随之而来的是一些不太好的想法不知何故被“泄露”给了其他家庭。

    4.思想警察的出现是为了惩罚那些社会无法接受的精神状态的始作俑者。

    5.剩下的在人类历史上都有很好的记录....

    我真的很享受这些加速人类进步的发明,真的!
    2948个帖子|注册
  31. Nowicki写道:
    *走进朋友家,发现了alexa*

    发送思想命令:Alexa订购2吨奶油玉米*


    对于那些不知道参考文献的人:

    图像

    编辑:我如何在Ars上减少图像的大小,使它不那么令人讨厌的超大?
    916个帖子|注册
  32. 随机写道:
    oldseeker写道:
    errpr
    “…这里使用的简化字母不包含任何数字、大写数字、……”
    也许应该用大写字母。


    Muphry定律罢工了!

    我喜欢通过提出莫弗莱定律来实现自我实现。
    4635个帖子|注册
  33. 随机写道:
    Nowicki写道:
    *走进朋友家,发现了alexa*

    发送思想命令:Alexa订购2吨奶油玉米*


    对于那些不知道参考文献的人:

    剧透: 显示
    图像


    编辑:我如何在Ars上减少图像的大小,使它不那么令人讨厌的超大?

    在某些情况下,可以使用url标记强制执行此操作,但这是主观的

    我使用ctrl scroll来调整浏览器图像的大小。剪与剪辑工具,并粘贴到imgbb.com,以获得一个网址,工作迅速和适当的大小。
    5560个帖子|注册
  34. 第一步:输入。
    第二步:360度内镜。
    24457个帖子|注册
  35. Nowicki写道:
    随机写道:
    Nowicki写道:
    *走进朋友家,发现了alexa*

    发送思想命令:Alexa订购2吨奶油玉米*


    对于那些不知道参考文献的人:

    剧透: 显示
    图像


    编辑:我如何在Ars上减少图像的大小,使它不那么令人讨厌的超大?

    在某些情况下,可以使用url标记强制执行此操作,但这是主观的

    我使用ctrl scroll来调整浏览器图像的大小。剪与剪辑工具,并粘贴到imgbb.com,以获得一个网址,工作迅速和适当的大小。

    只不过我们这些有严格内务部政策的人在办公室就不能看到他们了。我想必须做出牺牲。
    4635个帖子|注册
  36. 我用神经接口打字:

    某物某物某物诅咒你自动更正什么什么什么……
    注册了952个帖子
  37. theJonTech写道:
    这既神奇又可怕

    想象一下,在你有机会过滤之前,用你的大脑写邮件或短信!


    换句话说,大概90%的Twitter用户是如何使用这个平台的?
    注册了950个帖子
  38. "参与者的前运动皮层大约有200个电极"

    有人知道它是怎么形成的吗?
    我希望它不会像钻你的头骨然后把它注入…?那将是可怕的。另一边....在完全禁用模式下,我愿意用半个王国换这种能力…
    6个帖子|注册
  39. 如果我有电线卡在我的大脑,它将是一个电极进入我的杏仁核....

    我就等到无线版本是完善的。
    40660个员额|注册

你必须置评。

通道Ars Technica