BrainNet:用于人与人之间直接协作的多人脑对脑接口

更多技术干货第一时间送达

华盛顿大学(Universityof Washington)和卡内基梅隆大学(CarnegieMellon University)等多家研究机构的研究团队提出了BrainNet,据研究人员表示他们是第一个提出了多人直接协作解决问题的非侵入性脑对脑接口。该接口结合了脑电图(EEG)来记录大脑信号和经颅磁刺激(TMS)来无创地向大脑传递信息。

该脑机接口允许三个受试者通过直接的脑对脑交流进行协作和解决任务。三个实验对象中的两个被指定为“发送者”,他们的大脑信号被实时EEG数据分析解码。解码过程提取出每个发送方是否在一个类似俄罗斯方块的游戏中旋转方块的决定,然后再把它放下填充一行。发送者的决定通过Internet传输到第三个被试者的大脑,也就是“接收者”,这个被试者看不见游戏屏幕。通过对枕叶皮层的磁刺激发送者的决定传递给接收者的大脑。接收器整合了来自两个发送者的信息,并使用脑电图接口来决定是旋转块还是将块保持在同一方向。第二轮游戏为发件人提供了额外的机会来评估发件人的决定并将反馈发送到发件人的大脑,并使发件人更正第一轮中可能做出的错误决定。本研究以组间表现、被试决策的真/假阳性率及被试之间的相互资讯来评估BrainNet的表现。五组,每组有三个人,成功地使用BrainNet完成了协作任务,平均准确率为81.25%。此外,通过人为地在一个发送者的信号中注入噪声来改变发送者的信息可靠性,我们研究了接收者如何学习整合噪声信号以做出正确的决策。研究者发现,像传统的社交网络一样,大脑网络让接收者学会信任发送者,在这种情况下,仅仅基于直接传递到他们大脑的信息。该项研究结果为未来的脑对脑接口指明了道路,这种接口使人类能够通过大脑连接的“社交网络”来协作解决问题。

BrainNet的体系结构

研究人员提出的BranNet体系结构如下图所示,从图中可以看到,两名参与者(“发送者1”和“发送者2”)各自使用基于EEG的脑机接口(BCI),将有关协作任务(这是一个类似俄罗斯方块的游戏)的信息直接传递给第三名参与者(“接收者”)的大脑。

每个发送者的信息通过基于TMS的计算机-大脑接口(CBI)通过Internet传输到接收者的大脑。在有意识地处理来自发送方的两个输入后,接收方使用基于EEG的脑机接口来执行任务中的一个动作。发送方会在自己的屏幕上看到此操作的结果(两个屏幕上都显示了相同的更新后的游戏状态,从一个发送方的屏幕到另一个发送方的屏幕上的红色箭头所示)。然后,发送者有另一个机会向接收者的大脑传达新的信息,以便在第一轮中纠正错误的选择。虽然实验只使用了两轮,但是BrainNet允许发送者和接收者协作解决任务时进行任意数量的交互。BrainNet不同于之前被称为“Brainet”12的接口,后者结合了来自多个猴子大脑的记录来执行一个共同的运动任务,但它是单向的,并且不使用刺激来将信息传递回任何一个大脑。

实验中,研究人员设计了发送者和接收者使用的基于SSVEP的EEG脑机接口,如下图所示。

该脑机接口使用基于EEG的稳态视觉诱发电位(SSVEPs),参与者通过控制光标(白色填充圆)来传达他们关于是否旋转当前块的决定。参与者将注意力集中在屏幕左侧的一个闪烁的LED上(如图1所示为屏幕上的一个圆圈),以便将光标向左移动到“是”的位置。聚焦在屏幕右边的LED(以不同的频率闪烁)会导致光标向右移动到“否”的位置。如果光标到达绿色的“是”栏,接口将解释参与者的决定是旋转块(180度)。如果光标到达了“否”栏,接口会让参与者决定保持区块当前的方向。

试验

为了测量BrainNet的直接脑对脑沟通能力,研究人员让每个参与者进行了16次类似俄罗斯方块的迭代游戏的试验。在每次试验中,一名被指定为接收者的参与者负责决定是否在一块积木掉落到屏幕底部填补空白之前旋转它。关键的是,接收者不能看到屏幕的底部,必须依赖另外两个参与者(他们被指定为发送者) 的建议,他们可以看到屏幕的整个部分。这些发送者的任务是根据当前块的形状和底部的间隙做出正确的决定(旋转与否),并通过脑对脑接口将决定通知接收者。所有成员通过使用稳态视觉诱发电位(SSVEPs) 通过基于EEG的界面传达其决策。接收方和发送方在两轮游戏中看到的屏幕示例如下图所示。

从上图中可以看到,接收方在左侧看到三个示例屏幕,发送方在右侧看到这些屏幕。(顶部行)试用开始时的屏幕。请注意,接收方看不到带有间隙的底线,但发送方会看到。接收方必须依靠发送方来决定是否必须旋转红色块以填补空白并清除线。(中间行)接收方在第一轮做出决定(在本例中为“Rotate”)之后,游戏状态将更新以显示旋转的方块。(底部行)在第二轮之后,所有参与者都将看到接收方的操作结果以及该行是否已清除。在此示例中,接收器执行了纠正操作以再次旋转块,从而用块的底部填充间隙并清除了线条。

BrainNet表现

研究者对参与者使用BrainNet的表现进行了可视化对比。

图中显示了参与者的准确性。精度定义为由三重轴实现的正确块旋转的比例。虚线显示了理论概率精度(0.5)。

研究人员对比了SSVEP任务中脑电图信号的平均功率谱,如下图所示。在一秒钟的时间内和在实验对象之间取平均值。图中显示了SSVEP任务期间(虚线之间)的平均功率值,并显示了任务前后三秒钟的功率值,以便进行比较。可以发现,在任务之前和之后,两个频率的功率值重叠,而在任务期间,正确答案对应的频率的功率明显更大。

在BrainNet参与者中,接收者和“好”发送者之间传递的相互信息明显高于接收者和“坏”发送者之间传递的信息,如下图。

研究人员还量化接收方对发送方可靠性学习。(下图左面板)对于每个4次试验块,接收者的决策向量和每种发送者类型的决策向量的线性回归权重(Beta)随时间的演化(详见文本)。(下图右面板)每种类型的接收者和发送者的决策之间的皮尔逊相关系数随时间的演变。

这两个图都显示“好”发送者的上升趋势,而“坏的”发送者则没有,这表明接收者在与这两个发送者进行脑对脑的交互过程中了解到哪个发送者更可靠。

结论

研究人员提出的方法可以让接收者如何学习整合噪声信号以做出正确的决策。研究者发现,像传统的社交网络一样,大脑网络让接收者学会信任发送者,在这种情况下,仅仅基于直接传递到他们大脑的信息。该

项研究结果为未来的脑对脑接口指明了道路,这种接口使人类能够通过大脑连接的“社交网络”来协作解决问题。

论文信息:

BrainNet: A Multi-Person Brainto- Brain Interface for Direct Collaboration Between Brains

(0)

相关推荐

  • 脑机接口科普文

    本文首发在个人博客上(7988888.xyz),此文章中所有链接均通过博客进行访问. 每写一篇文章都是对自己知识的梳理,这也是我初衷的所在.当然在对所讲述的知识时,我也是尽可能的用浅白的话语阐述清晰, ...

  • 年轻人苦睡眠久矣!这项黑科技躺着就把问题解决了

    1924年,德国科学家Hans Berger首次探测到了大脑表面的活动. 来自大脑的神秘信号,第一次有了定义. 从那之后,人类对大脑的探索就从未停止. 甚至于,以脑电波技术为基础的脑机接口也成为了当下 ...

  • 脑机接口技术介绍、应用与挑战

    脑机接口社区 467篇原创内容 公众号 脑机接口简介 脑机接口的概念最先于1973年提出,伴随着计算机性能的飞速提高,在美国"人类脑计划"的资金支持下,脑机接口的研究进入了高速发展 ...

  • 用于追踪认知任务期间的亚秒级脑动态的高密度脑电

    这项工作为社区提供了高密度脑电图(HD-EEG, 256个通道)数据集,这些数据集是在无任务和任务相关范式下收集的.它包括43名健康的参与者执行视觉命名和拼写任务,视觉和听觉命名任务和视觉工作记忆任务 ...

  • 人与人之间才是最大的禁区

    #目前地球上还有哪些恐怖的人类禁区# 关于目前地球上还有哪些恐怖的人类禁区,我认为人类的禁区是非常多的.其实并不在乎我们从视觉上发现的那些感觉到非常恐怖的事情. 比方说那些深不见底的洞穴,让人为之胆寒 ...

  • 哲思 | 人与人之间的区别,在于认知

    人民论坛哲思,用灼热的观点启迪思想,用温暖的文字抚慰心灵. 每晚九点三十分,带你看清世界,认识自己,慢品人生滋味. 星河赴梦 Catch丶秋 - 银河赴约 认知的三个层面 决定人们行为背后的密码是认知 ...

  • 哲思|人与人之间的区别,在于认知

    人民论坛哲思,用灼热的观点启迪思想,用温暖的文字抚慰心灵. 每晚九点三十分,带你看清世界,认识自己,慢品人生滋味. 认知的三个层面 决定人们行为背后的密码是认知,一个人看待问题的角度.高度和深度,决定 ...

  • 人与人之间,最长久的关系!

    来源网络版权归原作者 漫漫说 您好,请点击下面的"关注"二字,您就可以每天收到精彩文章,我们一起读心灵美文,悟智慧人生,做一个淡泊.宁静.善良.豁达.智慧.优雅的人.完全免费,请放 ...

  • 人与人之间最舒服的关系,是不必讨好

    人与人之间最舒服的关系,是谁也不必讨好谁. 如果把太多人请进生命里,而他们又走进不了我们的内心,就只会把我们的生命搅扰得拥挤不堪. 我们没必要活成所有人喜欢的样子,也永远活不成所有人喜欢的样子. 01 ...

  • 人与人之间最舒服的相处,是各自带着凉薄

     01  成年之后, 经历的事情越多, 我就越觉得: 做一个凉薄的人, 不是冷漠, 而是成熟.  02  我比较讨厌两种人. 第一种是"交浅言深"的人. 你都跟他不怎么熟, 他上来 ...

  • 层次,是人与人之间,不可逾越的鸿沟(深度好文)

    人没有高低贵贱之分,但人品有. 点上方绿标收听主播诵读美文 <道德经>中讲:"上士闻道,劝而行之:中士闻道,若存若亡:下士闻道,大笑之." 真正区别一个人的,不是他的身 ...

  • 人与人之间的关系再亲近,也不能忽视这八条潜规则!#人际交往 #处世智慧 #应酬之道

    人与人之间的关系再亲近,也不能忽视这八条潜规则!#人际交往 #处世智慧 #应酬之道

  • 人与人之间的区别,在于认知

    认知的三个层面 决定人们行为背后的密码是认知,一个人看待问题的角度.高度和深度,决定了其成长与发展的程度. 认知有三个层面:第一是态度层面,即看法. 叔本华曾经说:"事物的本身并不影响人,人 ...