Hinton的预言要实现了!美加顶尖大学Nature发文:全科医学人工智能GMAI不止要取代「放射科医生」(2)

简介: Hinton的预言要实现了!美加顶尖大学Nature发文:全科医学人工智能GMAI不止要取代「放射科医生」

GMAI模型可以通过形式化表示医学知识来解决这些缺陷,例如知识图谱等结构可以让模型对医学概念和它们之间的关系进行推理;此外,在基于检索的方法的基础上,GMAI可以从现有的数据库中检索相关的背景,其形式包括文章、图像或之前的案例。


由此得到的模型可以提出一些警告,比如「这个病人可能会发展成急性呼吸窘迫综合征,因为这个病人最近因严重的胸腔创伤入院,而且尽管吸入的氧气量增加了,但病人动脉血中的氧分压却持续下降。」


由于GMAI模型甚至可能被要求提供治疗建议,尽管大部分是在观察数据的基础上进行训练,该模型推断和利用医学概念和临床发现之间的因果关系的能力将对临床适用性起到关键作用。


最后,通过获取丰富的分子和临床知识,GMAI模型可以通过借鉴相关问题的知识来解决数据有限的任务。


机遇


GMAI有潜力通过改善护理和减少临床医生的工作量来影响实际的医疗过程。


可控性(Controllability)


GMAI可以让用户精细地控制其输出的格式,使复杂的医疗信息更容易获得和理解,所以需要某种GMAI模型根据受众需求对模型输出进行重新复述。



由GMAI提供的可视化结果也需要精心定制,比如通过改变视角或用文字标注重要特征等,模型还可以潜在地调整其输出中特定领域的细节水平,或将其翻译成多种语言,与不同的用户进行有效沟通。


最后,GMAI的灵活性使其能够适应特定的地区或医院,遵循当地的习俗和政策,用户可能需要关于如何查询GMAI模型,以及有效利用其输出的正式指导。


适应性(Adaptability)


现有的医疗人工智能模型难以应对分布的转变,但由于技术、程序、环境或人口的不断变化,数据的分布可能会发生巨大变化。


GMAI可以通过上下文学习(in-context learning)跟上转变的步伐,例如医院可以教GMAI模型解释来自全新扫描仪的X射线,只需输入提示和几个样例即可。


也就是说,GMAI可以即时适应新的数据分布,而传统的医疗人工智能模型则需要在全新的数据集上重新训练;不过目前只有在大型语言模型中观察到了上下文学习(in-context learning)的能力。


为了确保GMAI能够适应上下文的变化,GMAI模型需要在来自多个互补数据源以及多样化的数据上进行训练。



比如为了适应2019年冠状病毒疾病的新变种,一个成功的模型可以检索过去变种的特征,并在面对查询中的新上下文时更新这些特征,一个临床医生可能直接输入「检查这些胸部X射线,看看是否有奥密克戎」。


模型可以对比德尔塔变体,考虑将支气管和血管周围的浸润作为关键信号。


尽管用户可以通过提示词手动调整模型行为,但新技术也可以发挥自动纳入人类反馈的作用。


用户可以对GMAI模型的每个输出进行评价或评论,就像ChatGPT使用的强化学习反馈技术,可以借此改变GMAI模型的行为。


适用性(Applicability)


大规模的人工智能模型已经成为众多下游应用的基础,例如GPT-3在发布后的几个月内就已经为不同行业的300多个应用程序提供了技术支持。


医学基础模型中,CheXzero可用于检测胸部X光片中的几十种疾病,并且不需要在这些疾病的显式标签上进行训练。


向GMAI的范式转变将推动具有广泛能力的大规模医疗AI模型的开发和发布,可以作为各种下游临床应用的基础:既可以直接使用GMAI的输出,也可以将GMAI的结果作为中间表示,后续再接入一个小型的领域内模型。


需要注意的是,这种灵活的适用性也是一把双刃剑,所有存在于基础模型中的故障都会在下游应用中继续传播。


挑战


虽然GMAI模型有诸多优势,但相比其他领域,医学领域的安全风险特别高,所以还需要应对确保安全部署的难题。


有效性/确认(Validation)


GMAI模型由于其前所未有的多功能性,所以想要进行能力验证也十分困难。

目前的人工智能模型都是针对特定任务而设计的,所以只需要在那些预定义的用例中进行验证即可,比如从大脑核磁共振成像中诊断出特定类型的癌症。


但GMAI模型还可以执行终端用户首次提出的先前未见过的任务(例如在脑部MRI中诊断其他疾病),如何预测所有的故障模式是一个更难的问题。



开发者和监管机构需要负责解释GMAI模型是如何被测试的,以及它们被批准用于哪些用例;GMAI界面本身的设计应该在进入未知领域时提出「标签外使用」的警告,而不能自信地编造不准确的信息。


更广泛地说,GMAI独特的广泛能力要求监管部门有远见,要求机构和政府政策适应新的范式,还将重塑保险安排和责任分配。


验证(Verification)


与传统的人工智能模型相比,GMAI模型可以处理异常复杂的输入和输出,使临床医生更难确定其正确性。


例如传统模型在对病人的癌症进行分类时,可能只考虑一项成像研究结果,只需要一名放射科医生或病理学家就可以验证该模型的输出是否正确。


而GMAI模型可能会考虑两种输入,并可能输出初始分类、治疗建议和涉及可视化、统计分析和文献参考的多模式论证。



在这种情况下,可能需要一个多学科小组(由放射科医生、病理科医生、肿瘤科医生和其他专家组成)来判断GMAI的输出是否正确。


因此,无论是在验证期间还是在模型部署之后,对GMAI输出的事实核查都是一个严峻的挑战。


创建者可以通过纳入可解释技术使GMAI输出更容易验证,例如,让GMAI的输出包括可点击的文献及具体的证据段落,使临床医生能够更有效地验证GMAI的预测。


最后,至关重要的是,GMAI模型应准确表达不确定性,防止用过度自信的陈述来误导用户。


社会偏见(Social bias)


医学人工智能模型可能会延续社会的偏见,并对边缘化人群造成伤害。

在开发GMAI时,这些风险可能会更加明显,海量数据的需求和复杂性会使模型难以确保没有不良的偏见。


GMAI模型必须得到彻底验证,以确保它们在特定人群(如少数群体)中的表现不会不佳。


即使在部署后,模型也需要进行持续的审计和监管,因为随着模型遇到新的任务和环境,可能会出现新的问题,迅速识别和修复偏见必须是开发者、供应商和监管者的首要任务。


隐私(Privacy)


GMAI模型的开发和使用对患者隐私构成了严重风险,可能会接触到丰富的病人特征,包括临床测量和信号、分子特征和人口统计信息以及行为和感官追踪数据。


此外,GMAI模型可能会使用更大的架构,更容易记忆训练数据并直接重复给用户,可能会暴露训练数据集中的敏感病人数据。


可以通过去身份化和限制对个别病人的信息收集量,减少暴露数据造成的损害。

隐私问题也并不限于训练数据,部署的GMAI模型也可能暴露当前病人的数据,例如提示性攻击可以欺骗GPT-3等模型,使其忽略之前的指令;恶意用户可以强迫模型忽略「不暴露信息」的指令以提取敏感数据。


参考资料:https://www.nature.com/articles/s41586-023-05881-4

相关文章
|
5月前
|
机器学习/深度学习 存储 人工智能
计算机发展前沿技术——医学领域的人工智能4
随着科技发展,人工智能技术在教育领域中的应用已取得较大进展。近年来,人工智能(AI)技术和由其引发的大数据时代自社会的各个层面包括我们的思维、生活方式和工作模式产生了巨大的变革;其与医学的结合给医疗系统带来深远的影响。从互联网到云计算,再到由大数据集合而成的人工智能,不断更新的处理手段使医疗行业也开始尝试新的转变,从传统的人工诊疗、教学模式逐步转变为依据机器学习来获取更高效的信息,并在医学多个领域已有比较广泛的应用。本文将从人工智能在医学领域的优势、当前的进展、应用、局限性和未来方向来进行综述。
|
5月前
|
机器学习/深度学习 人工智能 监控
计算机发展前沿技术——医学领域的人工智能3
随着科技发展,人工智能技术在教育领域中的应用已取得较大进展。近年来,人工智能(AI)技术和由其引发的大数据时代自社会的各个层面包括我们的思维、生活方式和工作模式产生了巨大的变革;其与医学的结合给医疗系统带来深远的影响。从互联网到云计算,再到由大数据集合而成的人工智能,不断更新的处理手段使医疗行业也开始尝试新的转变,从传统的人工诊疗、教学模式逐步转变为依据机器学习来获取更高效的信息,并在医学多个领域已有比较广泛的应用。本文将从人工智能在医学领域的优势、当前的进展、应用、局限性和未来方向来进行综述。
|
5月前
|
机器学习/深度学习 人工智能 大数据
计算机发展前沿技术——医学领域的人工智能2
随着科技发展,人工智能技术在教育领域中的应用已取得较大进展。近年来,人工智能(AI)技术和由其引发的大数据时代自社会的各个层面包括我们的思维、生活方式和工作模式产生了巨大的变革;其与医学的结合给医疗系统带来深远的影响。从互联网到云计算,再到由大数据集合而成的人工智能,不断更新的处理手段使医疗行业也开始尝试新的转变,从传统的人工诊疗、教学模式逐步转变为依据机器学习来获取更高效的信息,并在医学多个领域已有比较广泛的应用。本文将从人工智能在医学领域的优势、当前的进展、应用、局限性和未来方向来进行综述。
|
5月前
|
机器学习/深度学习 人工智能 自然语言处理
计算机发展前沿技术1——医学领域的人工智能
随着科技发展,人工智能技术在教育领域中的应用已取得较大进展。近年来,人工智能(AI)技术和由其引发的大数据时代自社会的各个层面包括我们的思维、生活方式和工作模式产生了巨大的变革;其与医学的结合给医疗系统带来深远的影响。从互联网到云计算,再到由大数据集合而成的人工智能,不断更新的处理手段使医疗行业也开始尝试新的转变,从传统的人工诊疗、教学模式逐步转变为依据机器学习来获取更高效的信息,并在医学多个领域已有比较广泛的应用。本文将从人工智能在医学领域的优势、当前的进展、应用、局限性和未来方向来进行综述。
|
3月前
|
机器学习/深度学习 人工智能 自然语言处理
探索未来医学之路——人工智能在医学中的应用
在现代医学领域,人工智能技术正逐渐崭露头角,为医疗诊断、药物研发、患者管理等方面带来了革命性的变化。本文将深入探讨人工智能在医学中的应用,并展望其未来的潜力。通过机器学习、自然语言处理、图像处理等技术手段,人工智能不仅提高了医学诊断的准确性和效率,还为个性化治疗和精确医学奠定了基础。
|
5月前
|
机器学习/深度学习 人工智能 算法
人工智能在医学领域的局限性
随着科技发展,人工智能技术在教育领域中的应用已取得较大进展。近年来,人工智能(AI)技术和由其引发的大数据时代自社会的各个层面包括我们的思维、生活方式和工作模式产生了巨大的变革;其与医学的结合给医疗系统带来深远的影响。从互联网到云计算,再到由大数据集合而成的人工智能,不断更新的处理手段使医疗行业也开始尝试新的转变,从传统的人工诊疗、教学模式逐步转变为依据机器学习来获取更高效的信息,并在医学多个领域已有比较广泛的应用。本文将从人工智能在医学领域的优势、当前的进展、应用、局限性和未来方向来进行综述。
145 1
|
8月前
|
机器学习/深度学习 数据采集 人工智能
精准医学时代:探索人工智能在DCA曲线下的临床医学应用
在当今医学领域中,精准医学作为一种以个体差异为基础的医疗模式逐渐受到重视和应用[1]。精准医学基于个体基因组、环境和生活方式因素的综合分析,旨在实现个体化的预防、诊断和治疗方案,从而提供更好的临床结果[2]。与传统医学相比,精准医学可针对患者的疾病风险、病因和药物反应等方面进行更为精准的预测,为医生和患者做出更明智的决策提供了依据。
152 0
|
9月前
|
机器学习/深度学习 人工智能 算法
当医学插上人工智能的翅膀
当医学插上人工智能的翅膀
|
11月前
|
机器学习/深度学习 人工智能 自然语言处理
人大高瓴人工智能学院Nature子刊:尝试利用多模态基础模型迈向通用人工智能
人大高瓴人工智能学院Nature子刊:尝试利用多模态基础模型迈向通用人工智能
209 0
|
1月前
|
人工智能 安全 数据挖掘
Pandas AI:Pandas与人工智能的结合,让你不再拘泥于如何使用pandas方法及处理语法
Pandas AI:Pandas与人工智能的结合,让你不再拘泥于如何使用pandas方法及处理语法

热门文章

最新文章