意念加AI算法「复原」每个手指,智能义肢登上Nature子刊封面

简介: 使用「意念」控制机械,让肢体缺失的残疾人过上正常人的生活,这听起来像是出现在电影中的场景。最近,瑞士洛桑联邦理工学院(EPFL)展示的新技术却让科幻变成了现实,他们的研究还登上了最新一期自然杂志子刊《Nature Machine Intelligence》的封面。

微信图片_20211201232720.jpg


近日,瑞士洛桑联邦理工学院的研究人员开发出了一种全新的机械臂控制方法,它利用人工智能为被截肢者提供前所未有的准确操纵能力。研究人员结合了神经工程学和机器人学的专业知识,使得穿戴者可以控制机械手的每个手指,并在穿戴机械手时自动抓起物体。这项新技术在包括 3 名被截肢者和 7 名肢体健全受试者的概念验证研究中获得了成功。


微信图片_20211201232748.png

点此查看完整视频


意念+AI 算法=灵活、稳健机械手


研究人员表示,他们提出的全新机械手臂控制方法,其关键优势在于通过人类意图和自动化算法共同进行操纵(shared control)——在需要高灵活性时,人类控制运动;当需要高鲁棒性时,AI 算法则进行辅助。


image.gif


换句话说,由于被截肢者的感觉和控制能力有限,他们很难保证自己的手指形状与物体相符并保证抓握力度适中,因此需要 AI 算法进行辅助来提高精确度。这种方法极大地改善了机械手的可用性,并可以灵活操作多个自由度的关节。


微信图片_20211201232804.gifimage.gif


用 AI 算法解码「意念」


在此前,科学家们对于机械臂控制研究很多,但充其量也只能控制单个手指,而且其研究成果也仅限于在四肢健全的人群中实现离线的「义肢控制」。


EPFL 提出的新系统,在神经学上的关键理念是对来自现有运动神经的信号进行解码,这些运动神经旨在为手指发出活动的信号。这些信号(sEMG)收集自被截肢者残肢的剩余神经,并被转换成假肢单个手指的运动信号,这种效果在之前的假肢研究中未能实现。得益于机器人技术,机械手可以帮助被截肢者抓起物体并能够维持些许时间,从而以一种真实的方式操控物体。


研究者首先提出了一个使用多层感知器(MLP)的运动比例解码器,该解码器允许穿戴者同时、连续地控制每个手指。


微信图片_20211201232806.jpg

图 1:实验装置和受试者。
a:在线实验中,4 名肢体健全和 3 名截肢受试者利用他们的表面机电信号控制一个虚拟的机械手。利用多层感知器对这些信号进行解码,得到单位数关节角度的预测结果;b:3 名截肢受试者的残缺程度不同;c:研究人员测试的肢体活动包含单位数和多位数活动。实验结果显示,除 A2 截肢受试者无法独立做出食指和中指弯曲/延展动作之外,其他所有受试者都能做出 c 中的所有动作。


这一技术中用到的机器学习算法首次学习了如何解码使用者的动作意图并将这些脉冲信号转换为假肢的手指运动。在训练算法的过程中,被截肢者的手指动作通过绑在他们残肢上的传感器传递给机器,以检测他们的神经活动。通过这一过程,机器学习算法学习假肢部位的肌肉刺激与特定手部运动的对应关系。


微信图片_20211201232809.gifimage.gif


训练完成之后,被截肢者就可以将有意识的动作脉冲转换为各个假肢手指的微调动作。该算法滤掉了与肢体运功无关的动作,只关心与运动紧密相关的动作。


「由于这些肌肉信号是有噪声的,我们需要一种机器学习算法来提取有意义的肌肉活动并将其转换为动作,」论文一作 Katie Z. Zhuang 解释称。


提高抓取灵活度


然而,仅仅依靠处理人类发出的信号,我们还远不能以让机械臂做到足够灵活。对此,研究人员开发了另一种机器学习算法,用来帮助用户抓取和操纵物体。


在机械手碰到物体之后,AI 算法就会让手指闭合,抓住物体。这一自动抓取功能源自之前的研究,在这项研究中,机械手被用来感知物体的形状,并仅基于接触得到的信息实现抓取。


「当你手里拿着一个物体,它开始松脱滑动,你只有数毫秒的时间做出反应,」EPFL 学习算法与系统实验室的 Aude Billard 表示。「机器手能够在 400 毫秒内做出反应。它的手指上布满压力传感器,可以在大脑感觉到物体滑动之前做出反应并稳住物体。」


微信图片_20211201232813.jpg

图 3:虚拟环境中的共享控制、装置和结果。
a:Allegro 机械手模拟器;b:共享控制策略。c:主动柔顺接触(共享)控制器的动作;d:共享控制的示例追踪(受试者 B4)。其中,顶部一行显示了无共享控制(左)和有共享控制(右)两种情况下检测到的总压力值;e:受试者 B2 的握持实验百分比;f:握持物体的时间维持在 7 秒;g:握持物体时远节趾骨、中节趾骨和近节指骨的接触。


华人一作


本论文的第一作者 Katie Z. Zhuang 本科毕业于约翰霍普金斯大学,并在杜克大学获得了生物医学/医学工程的博士学位,这一研究是她在洛桑联邦理工学院读博士后期间的工作。目前,Katie Zhuang 任瑞士弗里堡大学(University of Fribourg)研究科学家。


微信图片_20211201232817.jpg

参考内容:https://www.sciencedaily.com/releases/2019/09/190911113007.htm?utm_source=feedburner&utm_medium=feed&utm_campaign=Feed%3A+sciencedaily%2Fmost_popular+%28Most+Popular+News+--+ScienceDaily%29https://www.docwirenews.com/future-of-medicine/ai-powered-prosthetic-hand-provides-unprecedented-control-for-amputees/https://www.nature.com/articles/s42256-019-0093-5



文为机器之心报道,转载请联系本公众号获得授权

相关文章
|
15天前
|
数据采集 存储 人工智能
代理IP与AI自我进化:探索未来智能的新边界
在AI快速发展的今天,数据获取成为制约其进步的关键因素。代理IP技术通过匿名性和灵活性,帮助AI突破地域限制、绕过反爬虫机制,提升数据质量和模型训练效率,促进AI自我进化。本文通过实例和代码,探讨了代理IP在AI发展中的作用及潜在价值,强调了合理使用代理IP的重要性。
23 1
|
10天前
|
机器学习/深度学习 人工智能 UED
OOTDiffusion:开源AI虚拟试衣工具,智能适配性别和体型自动调整衣物
OOTDiffusion是一款开源的AI虚拟试衣工具,能够智能适配不同性别和体型,自动调整衣物尺寸和形状,生成自然贴合的试穿效果。该工具支持半身和全身试穿模式,操作简单,适合服装电商、时尚行业从业者及AI试穿技术爱好者使用。
95 27
OOTDiffusion:开源AI虚拟试衣工具,智能适配性别和体型自动调整衣物
|
22天前
|
人工智能 自然语言处理 算法
具身智能高校实训解决方案 ----从AI大模型+机器人到通用具身智能
在具身智能的发展历程中,AI 大模型的出现成为了关键的推动力量。高校作为培养未来科技人才的摇篮,需要紧跟这一前沿趋势,开展具身智能实训课程。通过将 AI 大模型与具备 3D 视觉的机器人相结合,为学生搭建一个实践平台。
181 64
|
10天前
|
机器学习/深度学习 Web App开发 人工智能
Amurex:开源AI会议助手,提供实时建议、智能摘要、快速回顾关键信息
Amurex是一款开源的AI会议助手,提供实时建议、智能摘要、快速回顾关键信息等功能,帮助用户提升会议效率。本文将详细介绍Amurex的功能、技术原理以及如何运行和使用该工具。
65 18
Amurex:开源AI会议助手,提供实时建议、智能摘要、快速回顾关键信息
|
5天前
|
人工智能 数据库 自然语言处理
拥抱Data+AI|DMS+AnalyticDB助力钉钉AI助理,轻松玩转智能问数
「拥抱Data+AI」系列文章由阿里云瑶池数据库推出,基于真实客户案例,展示Data+AI行业解决方案。本文通过钉钉AI助理的实际应用,探讨如何利用阿里云Data+AI解决方案实现智能问数服务,使每个人都能拥有专属数据分析师,显著提升数据查询和分析效率。点击阅读详情。
拥抱Data+AI|DMS+AnalyticDB助力钉钉AI助理,轻松玩转智能问数
|
12天前
|
机器学习/深度学习 缓存 人工智能
【AI系统】QNNPack 算法
QNNPACK是Marat Dukhan开发的量化神经网络计算加速库,专为移动端优化,性能卓越。本文介绍QNNPACK的实现,包括间接卷积算法、内存重排和间接缓冲区等关键技术,有效解决了传统Im2Col+GEMM方法存在的空间消耗大、缓存效率低等问题,显著提升了量化神经网络的计算效率。
31 6
【AI系统】QNNPack 算法
|
13天前
|
存储 人工智能 缓存
【AI系统】Im2Col 算法
Caffe 作为早期的 AI 框架,采用 Im2Col 方法优化卷积计算。Im2Col 将卷积操作转换为矩阵乘法,通过将输入数据重排为连续内存中的矩阵,减少内存访问次数,提高计算效率。该方法首先将输入图像转换为矩阵,然后利用 GEMM 库加速计算,最后将结果转换回原格式。这种方式显著提升了卷积计算的速度,尤其适用于通道数较多的卷积层。
33 5
【AI系统】Im2Col 算法
|
12天前
|
存储 机器学习/深度学习 人工智能
【AI系统】Winograd 算法
本文详细介绍Winograd优化算法,该算法通过增加加法操作来减少乘法操作,从而加速卷积计算。文章首先回顾Im2Col技术和空间组合优化,然后深入讲解Winograd算法原理及其在一维和二维卷积中的应用,最后讨论算法的局限性和实现步骤。Winograd算法在特定卷积参数下表现优异,但其应用范围受限。
28 2
【AI系统】Winograd 算法
|
2天前
|
传感器 机器学习/深度学习 人工智能
AI视频监控卫士技术介绍:智能化河道管理解决方案
AI视频监控卫士系统,通过高清摄像头、智能传感器和深度学习技术,实现河道、水库、城市水务及生态保护区的全天候、全覆盖智能监控。系统能够自动识别非法行为、水质变化和异常情况,并实时生成警报,提升管理效率和精准度。
30 13
|
1天前
|
人工智能 算法
AI+脱口秀,笑点能靠算法创造吗
脱口秀是一种通过幽默诙谐的语言、夸张的表情与动作引发观众笑声的表演艺术。每位演员独具风格,内容涵盖个人情感、家庭琐事及社会热点。尽管我尝试用AI生成脱口秀段子,但AI缺乏真实的情感共鸣和即兴创作能力,生成的内容显得不够自然生动,难以触及人心深处的笑点。例如,AI生成的段子虽然流畅,却少了那份不期而遇的惊喜和激情,无法真正打动观众。 简介:脱口秀是通过幽默语言和夸张表演引发笑声的艺术形式,AI生成的段子虽流畅但缺乏情感共鸣和即兴创作力,难以达到真人表演的效果。
下一篇
DataWorks