机器人医生STAR给猪做锁眼手术!83%的自主缝合任务完美完成

简介: 机器人医生STAR给猪做锁眼手术!83%的自主缝合任务完美完成
【新智元导读】近日,美国约翰斯·霍普金斯大学的研究人员设计了一个智能组织自主机器人STAR。在没有人类指导的情况下,机器人成功对猪的软组织进行了腹腔镜手术,比人类医生更快准狠。


近日,美国约翰斯·霍普金斯大学的研究人员设计了一个智能组织自主机器人STAR。

 

在没有人类指导的情况下,机器人STAR成功对猪的软组织进行了腹腔镜手术,又称锁眼手术(keyhole surgery)。

 

 

目前,该研究已在Science子刊发表。

 

论文地址:https://www.science.org/doi/10.1126/scirobotics.abj2908

 

这个机器人在猪的身上执行手术,意味着离人体实验就不远了。研究人员称,这是向人体试验迈出的重要一步。


83%缝合,STAR全搞定


其实,少数手术早已实现了自动化,然而这些机器人往往在执行硬组织相关的手术熟练有度,比如骨科手术。

 

那如果让它们自主去执行软组织等手术,那就有可能拿捏不住了。

 

即使对于人类医生来说,腹腔镜手术也是一个挑战,比如,在胃部不做大切口的情况下重新连接肠道。

 

为此,约翰·霍普金斯大学的Justin Opferman和他的同事们设计的智能组织机器人在有限的人工干预下,切除一段肠子后将其成功连接。

 

 

手术中,这个机器人给4头猪做了手术,总共缝了86针。

 

其中,手术三分之二的时间,机器人会自动缝合,而其余的三分之一,在尝试缝合之前,机器人需要医生去引导到位。

 

 

据介绍,83%的缝合任务,都是使用该工作流程自主完成,不过该系统也需要手动进行调整以纠正漏针的位置。

 

 

结果显示,STAR机器人做的手术明显优于人类做的手术。

 

其实,早在2016年,同一组科学家就给这个机器人写了个程序,让机器人给猪做手术。他们让机器人执行了将猪的肠子拉出体外,然后再缝合的操作。

 

 

而这次,机器人通过一个小开口,成功在狭窄的腹部完成了任务。这次的手术更具挑战性,因为器官会随着动物的呼吸有节奏地动。

 

Opferman 表示,「一旦你打开病人的身体,他体内所有的器官都会在动,所以你不太可能提前做好类似于往哪里下刀的计划。」

 

「如果你要手术的对象是像肠子这样的软组织,你一碰它,它也会跟着跑。因此,需要实时更新机器人的计划,弄清楚它需要做什么,以及如何完成任务。」

 

如果机器人能够擅长肠道吻合术,这将是一种需要高水平重复运动和精确度的手术。

 

 

要知道,连接肠道的两端可说是胃肠手术中最具挑战性的步骤,需要外科医生以高精度和一致性进行缝合。

 

即使是最轻微的手部颤抖或缝线错位,也可能导致泄漏,而这可能会给患者带来灾难性的并发症。


STAR机器人如何设计?


STAR机器人系统的组成部分,包括医用机械臂、外科手术工具、双通道NIR和3D结构光内窥镜成像系统。其中,标准机械臂是由制造商Kuka所提供。

 

 

研究人员表示,STAR其实是一种专门用于缝合软组织的视觉引导系统。

 

团队为STAR配备了增强自主性和提高手术精度的新功能,包括专门的缝合工具和最先进的成像系统,以提供更准确的手术区域可视化。

 

定制的软件在缝合的过程中控制机器人,使用机器人手臂上的3D摄像头拍摄图像,以此来感知机器人在体内的深度,并绘制病人腹部内部变化的情况。

 

STAR增强自主控制策略的体系结构

 

这套自主性流程能够让机器人启动/暂停/解除组织跟踪系统,检测组织的呼吸运动及其变形。

 

通知医生重新规划步骤,控制摄像机运动,以均匀和非均匀间距进行不同模式的缝合规划,预先过滤降低噪声,预测工具与组织的距离,以及使机器人工具与组织的呼吸运动和远程运动中心(RCM)下的同步。


未来5年,机器人上手


其实,机器人辅助手术在世界各地已经非常常见。据估计,2017年机器人辅助手术的数量超过64.4万例,但它们都是辅助手术。

 

正如刚刚提到,软组织手术对机器人来说尤其困难,因为它的不可预测性迫使机器人要快速适应以应对意外的障碍。

 

 

约翰斯·霍普金斯大学的研究人员为STAR设计了一个新颖的控制系统,可像人类外科医生一样实时调整手术计划。

 

STAR的特别之处在于,它是第一个以最少的人工干预来规划、调整和执行软组织手术计划的机器人系统。

 

Opferman说,这项试验是人类实现完全自主手术的第一步,尽管距离实现这一终极目标可能还需要几十年的时间。

 

 

随着研究成果的不断进展,研究小组将训练机器人慢慢地操作越来越多的手术部分,比如打开空腔,然后关闭,直到证明机器人自己能够独立完成整个操作过程。

 

他说,「由机器人执行部分手术的人体试验可能在5年内开始。」


 

参考资料:https://www.newscientist.com/article/2305980-robot-performs-keyhole-surgery-on-pigs-with-little-help-from-doctors/https://www.techradar.com/news/a-robot-just-performed-autonomous-surgery-on-a-pig-and-were-shookhttps://tech.huanqiu.com/article/46ZJ3sKOUOe

目录
打赏
0
0
0
0
367
分享
相关文章
Seer:上海 AI Lab 与北大联合开源端到端操作模型,结合视觉预测与动作执行信息,使机器人任务提升成功率43%
Seer是由上海AI实验室与北大等机构联合推出的端到端操作模型,结合视觉预测与动作执行,显著提升机器人任务成功率。
87 20
Seer:上海 AI Lab 与北大联合开源端到端操作模型,结合视觉预测与动作执行信息,使机器人任务提升成功率43%
RDT:清华开源全球最大的双臂机器人操作任务扩散基础模型、代码与训练集,基于模仿能力机器人能够自主完成复杂任务
RDT(Robotics Diffusion Transformer)是由清华大学AI研究院TSAIL团队推出的全球最大的双臂机器人操作任务扩散基础模型。RDT具备十亿参数量,能够在无需人类操控的情况下自主完成复杂任务,如调酒和遛狗。
214 22
RDT:清华开源全球最大的双臂机器人操作任务扩散基础模型、代码与训练集,基于模仿能力机器人能够自主完成复杂任务
ROS中阶笔记(八):机器人SLAM与自主导航—机器人自主导航
ROS中阶笔记(八):机器人SLAM与自主导航—机器人自主导航
1182 0
ROS中阶笔记(八):机器人SLAM与自主导航—机器人自主导航
适应多形态多任务,最强开源机器人学习系统八爪鱼诞生
【6月更文挑战第6天】【八爪鱼开源机器人学习系统】由加州大学伯克利分校等机构研发,适用于多形态多任务,已在arXiv上发表。系统基于transformer,预训练于800k机器人轨迹数据集,能快速适应新环境,支持单臂、双机械臂等。特点是多形态适应、多任务处理、快速微调及开源可复现。实验显示其在9个平台有效,但仍需改进传感器处理和语言指令理解。论文链接:https://arxiv.org/pdf/2405.12213
164 1
谷歌将大模型集成在实体机器人中,能看、听、说执行57种任务
【9月更文挑战第17天】近年来,人工智能在多模态大模型领域取得显著进展。谷歌最新研发的Mobility VLA系统,将大模型与实体机器人结合,实现了视觉、语言和行动的融合,使机器人能理解并执行复杂多模态指令,如“我应该把这个放回哪里?”系统在真实环境测试中表现出色,但在计算资源、数据需求及伦理问题上仍面临挑战。相关论文发布于https://arxiv.org/abs/2407.07775。
122 9
用MoE横扫99个子任务!浙大等提出全新通用机器人策略GeRM
【4月更文挑战第28天】浙江大学等研究团队提出的通用机器人模型GeRM,基于Transformer和Mixture-of-Experts(MoE)架构,能有效处理多种任务。通过离线强化学习,GeRM在99个子任务中展现出优越性能,优于单一专家网络策略,且具备高训练和推理效率。尽管需更多计算资源,但GeRM为多任务机器人技术带来了新突破,有望推动领域发展。[链接:https://arxiv.org/abs/2403.13358]
96 2
开箱即用的对话机器人解决方案,涵盖问答型对话、任务型对话和聊天型对话等多种场景,为您提供全方位的对话交互体验。
开箱即用的对话机器人解决方案,涵盖问答型对话、任务型对话和聊天型对话等多种场景,为您提供全方位的对话交互体验。
开箱即用的对话机器人解决方案,涵盖问答型对话、任务型对话和聊天型对话等多种场景,为您提供全方位的对话交互体验。
智能电话机器人是如何自主学习的
电话机器人主要通过语音识别和针对语意的理解识别客户所说的内容,针对性的回答问题,为企业高效筛选意向客户。除了电话机器人语音识别之外,电话机器人能够自主学习,不断完善产品知识及话术等,是它智能的另一种体现。那么电话机器人是如何自主学习的?

新智元

+ 订阅

热门文章

最新文章

AI助理

你好,我是AI助理

可以解答问题、推荐解决方案等