网易首页 > 网易号 > 正文 申请入驻

现已开源!浙江大学联合阿里达摩院开发首个专家级通用医疗影像AI模型RADAR,一次识别146种病症

0
分享至


近日,浙江大学医学院附属第一医院团队联合 阿里巴巴达摩院等机构 在 Science 发表文章“ An expert-level generalist AI for abdominal CT diagnosis ”报道了首个专家级通用医疗影像AI模型RADAR( Rapid Abdominal Diagnosis with AI and Radiology ) 。该模型是利用 可扩展的视觉 - 语言框架构建,直接基于大规模临床报告进行训练,无需人工标注。在 CT 影像判读任务中 , RADAR实现了广泛的诊断覆盖范围(146种病症)与高准确率(平均AUC达0.913);对紧急、陌生临床场景有着强大的泛化能力;其作为辅助工具时提升了放射科医师的诊断灵敏度,缩短了判读时长。

Radar为CT检查提供了一种可扩展、多功能且可解释性强的解决方案,证明了通用型AI在常规及复杂放射学诊疗任务中可与人类专家相媲美。


图1. RADAR模型及其部署示意图。

腹部增强计算机断层扫描(CT)是一种先进的影像学检查技术,能够提供腹部器官的详细三维图像,常用于多种疾病的诊断评估。但腹部有着大量复杂的解剖结构,具有临床意义的细微病变可能易被漏诊,因此其CT检查也属于较难评估的影像学检查之一。

长期以来,AI领域的一个愿景是构建一种通用型医疗AI系统,能够在多种实际临床场景中提供专家级的诊断支持。虽然特定场景的AI应用已取得诸多突破,但当前的AI解决方案在疾病覆盖范围和诊断准确性方面仍存在局限性。单个模型多针对特定场景的特定疾病开发训练,并且这些模型多依赖监督学习方法构建,训练时需耗费大量人工标注成本,费时费力,且通用性差,这限制了其在开放性临床应用场景中的可扩展性与适用性。

面对这一难题,研究团队尝试利用视觉-语言学习代替传统的监督学习。视觉-语言学习方法是通过训练模型处理配对的图像与文本数据,其核心原理为在共享表示空间中将来自同一患者的视觉与文本嵌入向量拉近,同时将来自不同患者的嵌入向量进行分离。但适用于自然图像领域的相关方法难以直接迁移至CT影像分析领域,因为CT影像具有复杂的解剖结构及稀疏的诊断信号特征。

为此,研究团队开发了细粒度的视觉-语言框架RADAR。首先研究团队构建了一个大型腹部CT数据集RAD-CT,包括424,911例CT检查数据及1500万组解剖学图像-文本配对数据,用于细粒度、大规模的模型训练。RADAR是将CT扫描数据集分解为解剖学单元,通过自适应对比学习方法将这些影像单元与诊断文本报告进行对齐,无需额外的人工标注即实现可扩展、多功能且可解释的诊断流程,使判断更容易理解和追溯。

最终,RADAR覆盖了人体腹部的胃、肝脏、胰腺、胆囊、肾脏、脾脏、肠道等主要器官的广泛病症,包括恶性肿瘤,堪称腹部疾病的“雷达”。


图2. RADAR模型开发。

研究着重评估了RADAR模型在18个腹部解剖结构的146种病症影像判读中的表现。在包含39,160次检查的真实临床队列中,RADAR对146种病症的诊断平均AUC为0.913(0.911-0.915),展现出优异的诊断性能。


图3.RADAR模型在146种病症中的表现。

在8个外部中心评估中,RADAR的AUC为0.874-0.912。在针对肝癌、胰腺癌、胃癌及结直肠癌进行的病理学确诊评估中,该模型AUC达到0.891–0.984。在另一项跨人群队列研究中,RADAR在未经任何微调情况下AUC为0.883。在初始训练阶段未包含的急腹症病例中,该模型仍保持优异性能,AUC为0.904,凸显了其对紧急、陌生临床场景的强大泛化能力。


图4.RADAR模型在8个外部中心的评估表现。

研究团队还将RADAR模型与临床放射科医师进行判读评估,涉及来自14个中心的26名放射科医师。结果显示,RADAR的平均准确率高于23名放射科医师。将该模型作为辅助系统引入,在协同使用场景下可将医师的判读灵敏度提升约10%,用时减少30%以上。此外,RADAR模型还能生成注意力图示以突出显示具有诊断意义的视觉线索,有助于临床医师更准确地解读影像结果,这一特性在临床实践中具有重要价值。


图5.RADAR模型与临床放射科医师的比较。

浙江大学医学院附属第一医院放射科主任肖文波表示:“腹部CT诊断是最具挑战的影像科任务之一,长期缺乏一种通用的辅助诊断模型。RADAR模型首次实现了腹部多器官、多病种的高准确检出,能像‘导航’一样为医生提供诊断支持,也有望帮助更多患者得到及时、准确的治疗。”

阿里巴巴达摩院资深算法专家张灵表示:“模型原生具有良好的泛化能力和通用性,其研究范式不仅可用于腹部CT的多病种识别,还有望应用于其他形态的医疗影像,这将加速通用AI的到来。”

Science期刊编辑Yevgeniya Nusinovich表示:“此前,开发AI解决方案的尝试多依赖于监督学习和人工标注,导致模型训练过程极为耗时费力。新开发的通用视觉-语言模型RADAR,在无需人工标注的情况下仍展现出优异的性能,即使对于其在训练过程中未曾遇到过的异常情况亦然。此外,该模型还能有效提升人类放射科医师的诊断成功率。”

RADAR通过将视觉-语言学习技术应用于包含大量未经标注的腹部CT影像及病历数据集,打破了传统医学影像AI模型对监督学习的高度依赖。研究显示,RADAR能够提供涵盖广泛解剖结构与临床病症的专家级诊断服务,可作为一款通用型AI助手,助力放射科医师开展诊疗工作并提升其诊断效能。

总之,RADAR为腹部CT检查提供了一种可扩展、多功能且可解释性强的解决方案,证明大规模视觉-语言学习技术或可为高效开发适用于复杂且多样化的放射学判读任务的通用型AI系统提供一条切实可行的路径。

RADAR模型现已正式开源:https://github.com/alibaba-damo-academy/damo-radar

原文信息:

Qi Zhang et al., An expert-level generalist AI for abdominal CT diagnosis. Science, 17 Sep 2026, Vol393, Issue6817. DOI: 10.1126/science.aec6129

参考资料:

https://mp.weixin.qq.com/s/3KZdEfT4nn6Tu3VWyonXDw

01|

02|

03|

04|

快点亮"在看”吧!

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
真没想到,APEC峰会大佬云集,爆火的竟不是雷军,而是一双旧白鞋

真没想到,APEC峰会大佬云集,爆火的竟不是雷军,而是一双旧白鞋

晓踏就是我
2026-11-19 11:54:24
AZEC峰会落幕,高市发出特别邀约,请11国把自家石油放进日本罐里

AZEC峰会落幕,高市发出特别邀约,请11国把自家石油放进日本罐里

影孖看世界
2026-11-19 23:26:23
炸裂!美股半导体集体大爆发!存储、芯片全线大涨,A股有希望了

炸裂!美股半导体集体大爆发!存储、芯片全线大涨,A股有希望了

风风顺
2026-11-20 03:00:04
《GTA6》性感Mandy火了 网友质疑为何不让她当女主

《GTA6》性感Mandy火了 网友质疑为何不让她当女主

3DM游戏
2026-11-19 22:48:25
多国首脑在深圳开启逛街模式,每个人的路线选择都很有意思

多国首脑在深圳开启逛街模式,每个人的路线选择都很有意思

麓谷隐士
2026-11-19 22:19:16
特朗普女婿库什纳:俄罗斯能够接受乌克兰获得安全保障,也表达了不再爆发新冲突的意愿,普京:克里米亚大桥遭袭后,不再讨论海上停火

特朗普女婿库什纳:俄罗斯能够接受乌克兰获得安全保障,也表达了不再爆发新冲突的意愿,普京:克里米亚大桥遭袭后,不再讨论海上停火

政知新媒体
2026-11-20 09:29:43
杨瀚森2分1板1助,开拓者送雄鹿12连败!瀚森表现值得夸赞

杨瀚森2分1板1助,开拓者送雄鹿12连败!瀚森表现值得夸赞

老梁体育漫谈
2026-11-20 11:35:52
难怪不澄清!有共同的朋友,第一次见面就入了眼,动了心

难怪不澄清!有共同的朋友,第一次见面就入了眼,动了心

小椰的奶奶
2026-11-20 09:11:16
一边争冠一边争状元!火箭2027年状元签概率18.8%,联盟第1!

一边争冠一边争状元!火箭2027年状元签概率18.8%,联盟第1!

贵圈真乱
2026-11-20 12:48:02
签了!中国和美国真签了!这次不是关税,也不是芯片,而是天然气

签了!中国和美国真签了!这次不是关税,也不是芯片,而是天然气

大卫聊科技
2026-09-20 13:27:56
拥有核武器的9个国家中,最穷的巴基斯坦, 是如何获得核武器的?

拥有核武器的9个国家中,最穷的巴基斯坦, 是如何获得核武器的?

文史达观
2025-05-03 06:45:05
开始动真格!追溯30年倒查来了,这4类人要当心!

开始动真格!追溯30年倒查来了,这4类人要当心!

细说职场
2026-11-19 16:28:20
越来越多的迹象表明:内塔尼亚胡间接上成为了中国的“大恩人”?

越来越多的迹象表明:内塔尼亚胡间接上成为了中国的“大恩人”?

无情有思可
2026-11-19 08:11:29
横店迎来三十年最为惨烈的一次断臂求生!130多座摄影棚,合计50万平方米,全部免租金向剧组开放

横店迎来三十年最为惨烈的一次断臂求生!130多座摄影棚,合计50万平方米,全部免租金向剧组开放

扶苏聊历史
2026-10-28 15:47:11
西路军失败是“借刀杀人”?长文深入分析西路军失败的真正原因

西路军失败是“借刀杀人”?长文深入分析西路军失败的真正原因

阿胡
2025-02-13 12:47:19
李在明得偿所愿,深圳收获实利,这份成果足够给韩国人一个交代了

李在明得偿所愿,深圳收获实利,这份成果足够给韩国人一个交代了

军情观察家
2026-11-20 12:10:44
人民日报点名曹德旺,释放2大信号,转移资产跑路传闻早有真相

人民日报点名曹德旺,释放2大信号,转移资产跑路传闻早有真相

爱看剧的阿峰
2026-11-20 10:41:29
美国人评论亚洲街道:日本干净,印度脏乱,而中国只用4个字形容

美国人评论亚洲街道:日本干净,印度脏乱,而中国只用4个字形容

傲傲讲历史
2026-11-07 09:18:49
晒晒我从山姆买的11个“厨房好物”,每一件都“夯爆了”,值得买

晒晒我从山姆买的11个“厨房好物”,每一件都“夯爆了”,值得买

三农老历
2026-11-20 07:24:48
六旬男子约按摩女发生关系,十分满意付了2000元,谁知女子扭头就把他告了

六旬男子约按摩女发生关系,十分满意付了2000元,谁知女子扭头就把他告了

江山挥笔
2026-11-18 14:13:58
2026-11-20 13:36:49
测序中国 incentive-icons
测序中国
基因行业领航新媒体
457文章数 20关注度
往期回顾 全部

科技要闻

老黄想回来?英伟达董事会:没门

头条要闻

中国女子在希腊失踪半年 保险箱发现10万欧元现金

头条要闻

中国女子在希腊失踪半年 保险箱发现10万欧元现金

体育要闻

伪强队?拥4亿豪阵欧国联6连败+世界杯出局

娱乐要闻

陈晓楠对话厉娜和许飞引全网热议

财经要闻

10万人逼宫英伟达,黄仁勋要复职了?

汽车要闻

全新红旗H9最有意思的地方,是它开始有自己的豪华逻辑了

态度原创

艺术
房产
亲子
数码
公开课

艺术要闻

投资55亿!深圳歌剧院施工现场更新,主音乐厅马蹄形已现!

房产要闻

6.6亿!海口卖地!

亲子要闻

宝宝气人但是聪明的4个行为

数码要闻

苹果公布2026古典乐年度专辑:任奫灿《哥德堡变奏曲》获奖

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版