0.3秒定位解剖位置、定位精度提升超2.3%!达摩院骨科AI成果已被MICCAI 2020收录

简介: 相比于辅助诊断,辅助治疗更加切入医生的工作流程。而且,临床治疗的实际商业价值也更高。

限时免费提供人脸人体、分割抠图、OCR以及医疗分析等共计140+项AI能力的调用【点此开通】


阿里巴巴达摩院医疗AI又有了一项突破。

7月9日,达摩院提出了一种AI助力骨科关节置换手术的新方法,该方法无需医生手动操作即可自动完成术前关键点位的测量,并且实现了精度上的突破,相比传统AI方法,达摩院医疗AI团队的精度可提升2.3%以上,整个过程仅需0.3秒。

达摩院算法专家透露,目前该研究成果已被医学影像分析行业的顶会MICCAI 2020收录,本月底将正式在医院上线使用。

AI+全髋关节置换术



全髋关节置换术(THA)是当今骨科方向比较成功的手术之一,这是一种用模拟人体关节结构的假体置换病损的髋关节来消除病痛的方法,即用人工关节假体替换患者关节,帮助病人恢复关节功能。

2018年,中国就实施了40多万台手术,随着人口老龄化问题的加重,这一数字将会逐年增加。
但一个现实问题是,该手术要求极其精密。

手术之前,医生会根据患者的年龄、骨结构形态改变和骨组织质量等情况,来制定一份准确详细的术前计划,这对手术的成功与否十分关键。

正常的流程是:医生需要先拍病损髋关节的X片,然后在X片寻找解剖位置、测量角度和长度,例如股骨颈干角度和腿长差异,以此来寻找合适的替换假体。

目前,这个过程完全是医生手动操作,需要1小时以上,而且经验不足的医生甚至可能出现点位不准确的情况。

为了提高医生的工作效率,达摩院提出了一种THA术前规划自动测量的方法,利用AI模拟医生的测量过程,通过先定位这些关键点,再根据点的坐标计算得到测量结果。

区别于传统AI只检测关键点的方法,达摩院还根据这些待测量量,定义了解剖点之间的连接边,以强化同一个测量量相关的各个点之间的联系,测量数据更加直观。

image.png

如上图所示,达摩院一共定义了22个关键点和24条连接边。22个关键点左右对称分布,每侧各有11个关键点(红色)和10条边(黄色),同时两侧之间也有4条连接边(绿色),以衡量左右髋的差异。

利用深度学习关键点检测方法,达摩院实现了对各个解剖关键点的准确定位,结果如下表所示:
通过在损失函数中加入解剖点之间的连接边回归损失,达摩院的模型可以取得更高的定位精度,相比于原始的U-Net、Hourglass和HRNet模型,达摩院的方法分别提升了2.3%、11.7%和5.1%。

表1. 模型的11个关键点的检测精度


image.png

* +edge为达摩院的方法(误差mm)

得到这个关键点之后,就可以根据这些点的坐标自动地计算对应的测量量。

下图是THA术前规划自动测量平台,图中测量了左右侧髋的股骨颈干角分别是131.76和127.79度,髋臼杯前倾角分别是36.83度和39.64度,两腿长差异是9.12毫米。

据雷锋网《医健AI掘金志》了解,目前,达摩院该技术正在和合作伙伴一起优化,并将落地到医院实际场景中。

image.png

图2. THA术前规划自动测量demo

达摩院医疗AI负责人专访



2017年10月11日,阿里巴巴达摩院正式成立,定位于基础科学和创新技术研究。而达摩院医疗AI团队的组建还要往前追溯到2016年,由时任阿里巴巴 iDST 副院长华先胜打造。

4年多的时间里,达摩院的研究范围一步步从基础AI的研究延伸到医疗专业领域知识的探索,目前在心血管、肺结节、肝脏、骨科、基因等领域均有布局。

该骨科AI成果发布后,医健AI掘金志第一时间采访到了达摩院医疗AI负责人迟颖。
可以看到,这次的成果——AI助力骨科关节置换手术,并不是骨科AI中的最热门方向(例如行业熟知的测骨龄等),达摩院为什么会选择这个方向?

迟颖认为,除了上述的老龄化背景与医疗需求,对于骨科而言,AI辅助治疗要比辅助诊断更有价值。而这一方向目前还处于发展初期,是比较有前景的领域。

她表示,相比于辅助诊断,辅助治疗更加切入医生的工作流程,可以明显提高医生的工作效率,对医生来说更有价值。而且,临床治疗的实际商业价值也更高。

据医健AI掘金志了解,现阶段,达摩院会和合作伙伴打造一个智能骨科平台落地合作医院,除了基础的术前定位测量工作,还会与合作伙伴一起建立影像诊断-骨科手术耗材供应链管理的智能化标准流程。

技术需要足够的落地场景,而巨头的优势在于可以借助内外部的生态伙伴,进一步加深行业的参与度。

迟颖表示,阿里入局医疗AI最大的优势之一就是背后有各方生态的合力,以及每一个生态方向的相对深厚的业务和技术积淀。

细细梳理一下,我们可以发现,阿里多个事业线在医疗领域均有所布局。

这其中包括:阿里健康在药物相关和未来医院等方面的探索;钉钉在医疗办公、远程会诊等方面的覆盖;蚂蚁金服在区块链、有信用保障的付款、和保险等方面的积累和实践;IoT物联网在医院设备管理等方面的规划,以及阿里云在远程辅助医疗(比如5G远程手术、或者5G远程VR救助等)方面可能的策略等。

从内部来看,这些“兄弟部门”一直是达摩院医疗AI成果落地的有力支撑。

以新冠肺炎期间的产品部署为例,阿里云在全球的海外数据中心,成为了达摩院算法部署的骨干节点,承载起了对有需求的45个国家和地区的合作伙伴的算法测试与合作。

在医疗影像智能方面,达摩院医疗AI为阿里健康提供基础的技术能力输出,阿里健康则会为达摩院进行业务机会的寻找和拓展、以及对内核技术的包装。

而从外部来看,达摩院也拥有一批生态合作伙伴。

早在2017年,阿里健康就与万里云发布“Doctor You”AI系统,万里云拥有实体的检查中心和移动体检车等硬件设施,成为AI产品在基层影像检查和体检等服务中的重要载体。

又例如卫宁健康,作为医疗信息化的代表性厂商,卫宁健康在医院信息化建设、医疗需求理解、销售渠道等方面的先天优势,也会给阿里的医疗AI产品铺设一条相对容易的落地之路。

迟颖在采访中也表示,PACS厂商等医疗信息化的合作伙伴,成为了达摩院与医院对接的桥梁。
“我们把算法嵌入合作伙伴的PACS系统中,医院用户在打开临床例行使用的PACS系统后,不需要再打开另外一套AI系统,为临床医生提供了更好的体验。”

今年以来,科亚、安德医智等AI产品陆续获得NMPA审批,政策层面不断释放提速的信号。

迟颖说到,疫情期间,达摩院的新冠肺炎CT影像AI就在立陶宛通过了医疗认证的豁免。在日本,和达摩院绑定的合作伙伴M3公司也已获得了PDMA的认证。同时也在马来西亚申请认证,国内和欧洲的相关审批工作也在准备中。

“达摩院的医疗AI,可以从各个视角去协助阿里医疗生态的各方面需求,用未来的技术服务阿里生态的未来业务应用,为社会带来有价值的改变。”


在线免费体验百种AI能力:【点此跳转】
机器智能技术结尾二维码.png

目录
相关文章
|
6月前
|
机器学习/深度学习 人工智能 安全
AI加速疫苗研发:从十年磨一剑到一年出成果
AI加速疫苗研发:从十年磨一剑到一年出成果
347 27
|
11月前
|
机器学习/深度学习 人工智能 自然语言处理
用AI精准定位问题代码,调试时间直接砍半!LocAgent:斯坦福开源代码调试神器,多跳推理锁定问题代码
LocAgent是由斯坦福大学、耶鲁大学等顶尖机构联合开发的代码定位框架,通过将代码库转化为图结构并利用大语言模型的多跳推理能力,实现精准的问题代码定位。
1105 1
用AI精准定位问题代码,调试时间直接砍半!LocAgent:斯坦福开源代码调试神器,多跳推理锁定问题代码
|
机器学习/深度学习 人工智能 算法
ProtGPS:MIT再造生命科学新基建!蛋白质AI一键预测定位+设计新序列,登Nature子刊
ProtGPS 是麻省理工学院和怀特黑德研究所联合开发的蛋白质语言模型,能够预测蛋白质在细胞内的亚细胞定位,并设计具有特定亚细胞定位的新型蛋白质。
1025 17
ProtGPS:MIT再造生命科学新基建!蛋白质AI一键预测定位+设计新序列,登Nature子刊
|
人工智能 监控 自动驾驶
Migician:清北华科联手放大招!多图像定位大模型问世:3秒锁定跨画面目标,安防监控迎来AI革命!
Migician 是北交大联合清华、华中科大推出的多模态视觉定位模型,支持自由形式的跨图像精确定位、灵活输入形式和多种复杂任务。
374 3
Migician:清北华科联手放大招!多图像定位大模型问世:3秒锁定跨画面目标,安防监控迎来AI革命!
|
12月前
|
机器学习/深度学习 人工智能 自然语言处理
TsingtaoAI亮相2025青岛西海岸科技成果对接会,以具身智能实训赋能AI人才培养
3月26日青岛——由青岛市科学技术局指导、青岛西海岸新区管委联合上海技术交易所等多家机构主办的“2025青岛西海岸新区科技成果对接会”在青岛金沙滩蓝海御华酒店盛大启幕。青岛市委常委,西海岸新区工委书记、区委书记孙永红,青岛市科学技术局副局长张栋华和上海技术交易所总裁颜明峰等参加会议并致辞。TsingtaoAI受邀参会并发表主题分享,公司负责人汶生以《基于DeepSeek的具身智能实训》为题,向与会嘉宾展示了AI具身智能技术如何突破传统边界,助力AI人才从实验室走向产业一线。
328 1
|
人工智能 达摩院 计算机视觉
SHMT:体验 AI 虚拟化妆!阿里巴巴达摩院推出自监督化妆转移技术
SHMT 是阿里达摩院与武汉理工等机构联合研发的自监督化妆转移技术,支持高效妆容迁移与动态对齐,适用于图像处理、虚拟试妆等多个领域。
582 9
SHMT:体验 AI 虚拟化妆!阿里巴巴达摩院推出自监督化妆转移技术
|
人工智能 编解码 自然语言处理
Aria-UI:港大联合 Rhymes AI 开源面向 GUI 智能交互的多模态模型,整合动作历史信息实现更加准确的定位
Aria-UI 是香港大学与 Rhymes AI 联合开发的多模态模型,专为 GUI 智能交互设计,支持高分辨率图像处理,适用于自动化测试、用户交互辅助等场景。
599 11
Aria-UI:港大联合 Rhymes AI 开源面向 GUI 智能交互的多模态模型,整合动作历史信息实现更加准确的定位
|
数据采集 人工智能 安全
CIO面临更快交付AI成果的压力
CIO面临更快交付AI成果的压力
|
人工智能 自然语言处理 算法
创企Sakana AI发布首个研究成果
Sakana AI,由前谷歌研究员创立,利用进化算法自动化创建强大的基础模型,革新大型语言模型开发。公司研发的日语数学LLM和文化意识VLM在基准测试中表现出色,其多智能体框架提升了视频生成效率和灵活性。尽管存在局限,如视频质量和数据集问题,但其开放框架对AI社区有重大贡献,推动技术发展。
379 4
创企Sakana AI发布首个研究成果