虎嗅 2024年08月08日
全球首例:不开颅,把ChatGPT装进脑子里?
index_new5.html
../../../zaker_core/zaker_tpl_static/wap/tpl_guoji1.html

 

Synchron公司研发的脑机接口技术,无需开颅即可植入,并结合GPT-4o,让瘫痪患者仅凭意识操控Vision Pro,实现用“意念”玩游戏、观看视频等功能。该技术通过读取大脑信号,将其转换为可识别数字命令,并通过AI模型预测用户意图,提供多种回复选项,大幅减少用户输入量,提高交互效率。Synchron还在探索更强大的多模态信息输入模式,让AI更像大脑的延伸,为残障人士提供更自由、独立的生活方式。

🧠 **无需开颅的侵入式脑机接口**: Synchron的stentrode植入物,外观和用法类似血管支架,可读取、解码大脑信号,并将其传输到胸前的设备,实现非侵入式脑机接口的植入。 该技术最大的优势在于无需开颅手术,降低了植入风险,并提高了患者的接受度。stentrode植入物在血管壁上扩展,形成一个中空的立体网络,可以有效地读取大脑信号,并将其转化为可识别的数字命令。这使得患者能够通过脑机接口控制各种设备,例如计算机、手机等。

🤖 **AI赋能脑机接口**: Synchron将GPT-4o整合到脑机接口系统中,提高了患者与外部世界的交互效率。 GPT-4o能够根据用户的大脑信号,预测用户想要表达的内容,并提供多种回复选项,让用户只需选择即可完成交流。这对于行动不便的患者来说,无疑是巨大的进步。此外,GPT-4o还可以根据用户的选择,不断学习和优化预测能力,使其更加准确和个性化,为用户提供更加流畅的交互体验。

👓 **脑机接口与Vision Pro的融合**: Synchron将脑机接口与苹果Vision Pro连接,让患者可以仅凭意识控制这台设备。 通过脑机接口,患者可以发送信息、观看Apple TV、玩纸牌等,实现与Vision Pro的无缝交互。这标志着脑机接口技术在实际应用中取得了重大突破,为残障人士提供了更便捷、更自由的生活方式。Vision Pro作为一种融合数字和物理世界的空间计算机,其与脑机接口的结合,将为用户带来全新的交互体验。

🎮 **脑机接口的未来发展**: Synchron等公司的努力,为脑机接口技术的发展提供了新的思路和方向。 未来,脑机接口技术将更加成熟,并与人工智能技术深度融合,为用户提供更加智能、更加个性化的体验。脑机接口将不再局限于医疗领域,而是将应用于更多领域,例如教育、娱乐、游戏等。

🚀 **OpenBCI的非侵入式脑机接口**: OpenBCI推出的头显设备Galea,通过脑电图、眼电图、肌电等传感器收集来自大脑、眼睛、肌肉的数据,并通过配套软件套件实现实时交互。 Galea的传感器阵列不仅可以用于本体,未来也可以用到例如Vision Pro等其他设备中,为用户提供更多交互方式。Galea的出现,证明了非侵入式脑机接口技术的可行性,为未来脑机接口的发展提供了新的可能性。

🌟 **脑机接口的意义**: 脑机接口技术为残障人士提供了新的希望,让他们能够重拾独立生活的能力,并享受到与健全人一样的体验。 脑机接口技术的发展,不仅是科技的进步,更是对人类尊严和自由的追求。它将帮助更多人实现独立生活,并创造更加美好的未来。

不开颅,把 ChatGPT 装进脑子里?

没错,这就是这家名为Synchron的脑机接口公司正在做的事,不仅是给脑机接口装上GPT,还让瘫痪病人用意识在Vision Pro上玩起了“纸牌”。

Synchron的脑机接口技术最大的独特之处在于,它结合了现有的技术,不用开颅就可以完成侵入式脑机接口的植入。

Synchron的植入物叫做stentrode,无论外观还是用法都和血管支架十分相似。

但不同的是,它是一个16个传感器的网状材料组织,可在血管壁上扩展,形成一个中空的立体网络,用以读取、解码大脑用于完成特定任务的信号,并将这些信号传输到胸前的设备。

除了这一设备外,Synchron的脑机接口设备还包含一个阵列发射器单元,它被放置在用户的胸部皮下组织中,记录来自运动皮层的大脑信号,并将原始数据传输到接收器单元上,转换为任何蓝牙设备都可以识别的标准化数字命令。

64岁的Mark是最早体验Synchron脑机接口的用户之一,是一名肌萎缩侧索硬化患者。

受到“渐冻症”的影响,他正在渐渐失去对肢体的控制以及语言能力,但也在体验GPT与脑机接口的结合中,获得新的能力。

Synchron让ChatGPT等大型语言模型以文本、音频和视觉的形式获取相关上下文,预测用户可能想要表达的内容,并为他们提供一个可供选择的菜单:

你可以选择几种不同的回复内容,所以与其一个字一个字地输入,我只需点击一两下按钮,就能完成大部分句子。

如果AI生成的答案都不正确,还有一个刷新按钮可供用户选择。通过这种模块选择的形式,Synchron让用户在很大程度上减少了用户的输入量,提高了响应的自然性和流畅性,而这对于在行动不易的患者而言,显然非常重要。

Mark使用脑机接口从GPT生成的可能性菜单中,选择想要表达的内容

更重要的是,随着使用时间的增加,系统会不断学习用户的语言习惯和偏好,并通过用户选择的反馈调整和优化预测能力,使其越来越符合用户的习惯,Mark笑着说:“偶尔它会爆出一个粗口,这也是我偶尔会说的。”

Oxley表示,Synchron已经试验了大约一年的不同AI模型,直到GPT-4o的出现带来了转机。

今年5月,一个特别演示视频引起了Oxley的注意。它展示了一个有视力障碍的男人在城市中导航,让AI描述他的周围环境,甚至帮助他叫出租车。

这个视频启发了Oxley,也让他看到了脑机接口的未来。在加入GPT-4o之后,Synchron脑机接口迎来了4个方面的显著变化:

1. 辅助通信:GPT生成预先设定的回答选项,用户不需要逐字输入;

2. 智能预测:GPT利用上下文预测用户可能的回答选项,减少工作量;

3.多模态输入:GPT-4o接收文本、音频和视频输入,通过多种方式提供信息;

4.适应性学习:系统逐渐学习和适应用户的习惯和偏好,提高准确性和个性化。

更重要的是,这种AI+脑机接口的多模态信息输入模式,与大脑本身的行为模式有一些相似之处:

我们这样做的原因是,多模态“4o”是不同的,因为它使用的是来自环境的输入,这些输入的行为就像是用户大脑的延伸。当用户开始与提示互动时,它将获得环境中发生的一切的实时信息流。

这就使AI在脑机接口领域有着更大的意义。

除了GPT以外,Mark的脑机接口体验最近还迎来了新的升级——连上了苹果Vision Pro。

7月30日,Synchron宣布已经成功将其脑机接口与苹果Vision Pro连接,使用Synchron脑机接口的患者可以通过意识控制这台设备。Oxley表示:“Vision Pro是一个功能强大的系统,但它依赖于使用手势来控制UI。我们直接从大脑发送控制信号来取代手势,我们正在向不需要触摸或语音的人机交互新蓝牙标准迈进,这是数百万瘫痪患者尚未满足的关键需求。”

自Vision Pro发布以来,他就开始积极参与测试,目前使用脑机接口控制Vision Pro已经与控制iPhone、iPad没有太大区别,不仅可以发送信息,还可以观看Apple TV、玩纸牌,而这些都是仅用意念进行的交互。

Mark表示,他尤其喜欢Vision Pro中观察夜空星座的应用:

“这太酷了,它真的栩栩如生。使用这种增强现实技术的效果非常显著,我可以想象,对于处于我这种境地的人或其他失去日常生活能力的人来说,它也会如此。它可以把你带到你从未想过会再次看到或体验的地方,为我提供了另一种体验独立的方式。”

这是Mark的新体验,也是很多人对于脑机接口的最终幻想。

例如总部位于布鲁克林的开源神经技术公司OpenBCI,也在致力于通过AI及神经技术的融合,促进非侵入式脑机接口的发展。

相比Vision Pro而言,OpenBCI推出的头显设备Galea更像一个融合了VR/AR设备的传感器平台。

它搭载了诸如脑电图、眼电图、肌电、皮肤电等一系列不同的传感器,用于收集来自大脑、眼睛、肌肉的数据。再通过配套的软件套件,Galea能将原始传感器数据转化为通用信号,拥有更强的实时交互性和可控性。

CNET的记者在体验后表示,他能在VR设备中观察自己的脑电波。

得益于Galea肌电信号传感系统,他还能通过面部肌肉的微小运动来玩一款名为《Cat Runner》的小游戏,控制其中的卡通人物移动,而且由于传感器都在头部,自己的活动不会干扰基于摄像头的其他功能。

在一场TED演讲中,一位名为Christian Beyerlain的BCI脊髓型肌肉萎缩症患者,现场演示了如何在双手不操作手柄、不借助任何外力的情况下,使用OpenBCI设备控制无人机。

OpenBCI的创始人Russomanno指出,通过肌电信号传感系统,Galea能够扩展这位患者的更多身体机能。

毫无疑问,与Mark一样,通过脑机接口与头显设备的结合,让失去手部或声音活动能力的用户也能够随心所欲地操控设备。

橡胶头里包含一系列脑电传感器

更重要的是,作为一种更高效的收集信息方式,Galea的传感器阵列不仅可以用于本体,未来也可以用到例如Vision Pro等其他设备中。

显然,Vision Pro作为一种融合数字和物理世界的空间计算机,让我们可以用眼睛、手、声音,实现自然、直观的交互。

但还有很多残障人士,无法使用这些方法,那么就应该以他们能够做到的交互方式,让他们也享受到沉浸感,并丰富手眼控制之外与计算机交互的方式,无论GPT-4o还是脑电传输设备,其目的都是一样的。

对于像Mark和Christian这样的人来说,这代表着一种新的自由和独立的方式,让他们能够在脑机接口的帮助下,重拾一部分作为人类的独立性和尊严。

这,或许才是他们真正想要得到的。

Fish AI Reader

Fish AI Reader

AI辅助创作,多种专业模板,深度分析,高质量内容生成。从观点提取到深度思考,FishAI为您提供全方位的创作支持。新版本引入自定义参数,让您的创作更加个性化和精准。

FishAI

FishAI

鱼阅,AI 时代的下一个智能信息助手,助你摆脱信息焦虑

联系邮箱 441953276@qq.com

相关标签

脑机接口 人工智能 GPT-4o Vision Pro Synchron OpenBCI Galea
相关文章