网易首页 > 网易号 > 正文 申请入驻

Nat Biomed Eng | 李瑞江团队开发通用的多示例学习框架—nnMIL,应用于病理计算

0
分享至


随着计算病理学和病理基础模型(pathology foundation models)的快速发展,现如今研究人员能够从全切片病理图像(whole-slide images,WSIs)中提取具有丰富语义信息的patch-level特征。然而,临床预测最终通常需要在整张切片甚至患者层面做出判断。因此,如何将大量patch特征有效整合为稳定、准确的slide-level预测,是计算病理学中的一个关键问题。

目前,多示例学习(multiple instance learning,MIL)是解决这一问题的主要方法,代表性工作包括 ABMIL1、CLAM【2】、DSMIL【3】和 TransMIL【4】等。这些方法通过设计不同的网络结构,将大量 patch-level 特征聚合为 slide-level 表征。但现有MIL方法仍存在一些不足。首先,由于不同WSI包含的patch数量差异很大,传统MIL训练过程中每次迭代只能处理一张全切片图像(batch size = 1),限制了模型训练的效率和稳定性。其次,现有研究更多关注设计新的MIL网络结构,而对于 batch size、采样策略和训练配置等因素缺乏系统研究。实际上,即使使用相同的网络结构,不同的训练策略也可能带来明显不同的性能。

为了解决这些问题,2026年8月25日,斯坦福大学李瑞江团队在Nature Biomedical Engineering发表了文章nnMIL: a generalizable multiple instance learning framework for computational pathology5】。研究团队受到医学图像分割领域经典方法nnU-Net【6】的启发,提出了nnMIL(no-new MIL),一个简单、通用的多示例学习框架,旨在连接病理基础模型的patch-level特征和slide-level临床预测。与不断设计更加复杂的 MIL 网络不同,nnMIL更加关注如何通过系统优化训练策略,提高模型的性能、稳定性和泛化能力。研究团队在近40,000张 WSI、35个临床任务以及4种病理基础模型上对 nnMIL 进行了系统评估。相关任务涵盖疾病诊断和分型、分子生物标志物预测以及泛癌种预后预测。研究使用了 GigaPath【7】、H-Optimus-0【8】、UNI【9】和 Virchow2【10】四种病理基础模型。7种现有MIL方法相比,nnMIL在不同任务和不同基础模型上总体表现更加稳定,并取得了更好的预测性能。


与现有研究相比,nnMIL有几个主要贡献:

研究思路。现有 MIL 研究通常重点关注设计新的网络结构,而 nnMIL 更强调训练策略本身的重要性。研究表明,相比不断增加模型复杂度,系统优化 MIL 的训练方式同样可以明显提高模型的性能、稳定性和泛化能力。进一步的实验发现,将 nnMIL 的训练策略应用到已有的 ABMIL 和 DSMIL 中,也能够提升这些模型的整体表现,说明这种训练思路并不局限于 nnMIL本身。

技术改进。nnMIL 通过随机采样固定数量的patch,将原本长度不同的输入转换为固定大小的输入,从而实现大batch训练。同时,研究团队进一步加入特征采样和平衡采样,并采用基于规则的参数配置方式,使模型能够更加稳定地适用于不同数据集和任务。其核心思想与 nnU-Net 类似: 与其针对每个数据集反复进行复杂的人工调参,不如将经过验证的经验总结为一套简单、可复用的配置规则。

临床可靠性。nnMIL不仅输出最终的slide-level预测,还能够通过特征维度滑窗推理获得多个预测结果,并进一步估计模型的不确定性。研究发现,不确定性较高的病例更容易出现预测错误,因此可以帮助筛选出需要病理学家进一步复核的复杂病例。对于分子标志物预测,高不确定性的病例也可以进一步考虑进行额外的分子检测。

nnMIL具有广泛的应用前景。随着GigaPath、UNI、Virchow2等病理基础模型不断发展,如何将强大的patch-level特征转化为可靠的slide-level临床预测将变得越来越重要。nnMIL提供了一种简单、通用且易于扩展的解决方案,可以应用于疾病诊断、分子标志物预测和患者预后评估等多种计算病理任务,为病理基础模型进一步走向临床应用提供了新的方法。


图1: nnMIL模型结构及临床验证

https://www.nature.com/articles/s41551-026-01767-8

参考文献

[1] Ilse M., Tomczak J., Welling M. Attention-based deep multiple instance learning. International Conference on Machine Learning, 2127–2136 (2018).

[2] Lu M.Y., et al. Data-efficient and weakly supervised computational pathology on whole-slide images. Nature Biomedical Engineering 5, 555–570 (2021).

[3] Li B., Li Y., Eliceiri K.W. Dual-stream multiple instance learning network for whole slide image classification with self-supervised contrastive learning. IEEE/CVF Conference on Computer Vision and Pattern Recognition, 14318–14328 (2021).

[4] Shao Z., et al. TransMIL: transformer based correlated multiple instance learning for whole slide image classification. Advances in Neural Information Processing Systems 34, 2136–2147 (2021).

[5] Luo X., Xiang J., Ji Y., Li R. nnMIL: a generalizable multiple instance learning framework for computational pathology. Nature Biomedical Engineering (2026). https://doi.org/10.1038/s41551-026-01767-8.

[6] Isensee F., Jaeger P.F., Kohl S.A., Petersen J., Maier-Hein KH. nnU-Net: a self-configuring method for deep learning-based biomedical image segmentation. Nature Methods 18, 203–211 (2021).

[7] Xu H., et al. A whole-slide foundation model for digital pathology from real-world data. Nature 630, 181–188 (2024).

[8] Saillard C., et al. H-optimus-0. https://github.com/bioptimus/releases/tree/main/models/h-optimus/v0 (2024).

[9] Chen R.J., et al. Towards a general-purpose foundation model for computational pathology. Nature Medicine 30, 850–862 (2024).

[10] Zimmermann E., et al. Virchow2: scaling self-supervised mixed magnification models in pathology. arXiv:2408.00738 (2024).

学术合作组织

(*排名不分先后)


战略合作伙伴

(*排名不分先后)

推荐直播

转载须知

【非原创文章】本文著作权归文章作者所有,欢迎个人转发分享,未经作者的允许禁止转载,作者拥有所有法定权利,违者必究。

BioArt

Med

Plants

人才招聘


点击主页推荐活动

关注更多最新活动!


特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
王艺迪和张本美和同区,陈熠和削球手同区,蒯曼对战早田希娜

王艺迪和张本美和同区,陈熠和削球手同区,蒯曼对战早田希娜

子水体娱
2026-09-06 15:38:17
英国遭到拒绝后发出警告,中国若不合作,中企海外资产将被没收!

英国遭到拒绝后发出警告,中国若不合作,中企海外资产将被没收!

冷眼看尽世间繁华
2026-04-05 03:49:18
未来7天迎来好运吉利的三大生肖,有横财喜事,赚得盆满钵满

未来7天迎来好运吉利的三大生肖,有横财喜事,赚得盆满钵满

毅谈生肖
2026-09-06 09:40:51
如果一个人混到了60岁,能拥有这3样东西,那绝对是人生赢家

如果一个人混到了60岁,能拥有这3样东西,那绝对是人生赢家

小影的娱乐
2026-08-07 00:08:30
气温猛降!江苏入秋最新预测!

气温猛降!江苏入秋最新预测!

最江阴
2026-09-06 08:58:20
太恶心了!一女乘客发帖吐槽,足足4小时啊,快被旁边大哥的屁股,熏得想“跳飞机”

太恶心了!一女乘客发帖吐槽,足足4小时啊,快被旁边大哥的屁股,熏得想“跳飞机”

火山詩话
2026-09-03 08:55:21
沉默六天,终于瞒不住了!中方登船检查3小时,日本政府罕见失声

沉默六天,终于瞒不住了!中方登船检查3小时,日本政府罕见失声

墨子翟的日记y
2026-09-06 13:08:09
皇马自己先炸了!前4轮首发3次,皇马21岁新星成了更衣室火药桶?

皇马自己先炸了!前4轮首发3次,皇马21岁新星成了更衣室火药桶?

阿陆
2026-09-06 15:43:49
第一个被姑姑退回来的孩子!一段视频,戳破亲戚间体面的遮羞布!

第一个被姑姑退回来的孩子!一段视频,戳破亲戚间体面的遮羞布!

世界圈
2026-08-27 21:36:51
李连杰一家三口拜见仁波切,64岁利智许久不见,颜值回春如昔日!

李连杰一家三口拜见仁波切,64岁利智许久不见,颜值回春如昔日!

娱乐团长
2026-06-02 15:09:12
锦旗藏刀刺向医生,贵中医二附院发生伤医事件,警方通报!医生身中多刀,目前仍在ICU抢救

锦旗藏刀刺向医生,贵中医二附院发生伤医事件,警方通报!医生身中多刀,目前仍在ICU抢救

梅斯医学
2026-09-06 09:13:30
建议把大学生维权纳入扫黑除恶范围,这得心肠歹毒到啥程度才能想得出?

建议把大学生维权纳入扫黑除恶范围,这得心肠歹毒到啥程度才能想得出?

壹家言
2026-09-05 14:59:26
还没出4S店,刚交付的新车被销售撞了!店长称不能退换:发票已开,交付确认书已签……

还没出4S店,刚交付的新车被销售撞了!店长称不能退换:发票已开,交付确认书已签……

19楼
2026-09-03 15:53:56
蓝白合破局,赖清德再次躺着选?郑丽文、卢秀燕、韩国瑜齐聚彰化

蓝白合破局,赖清德再次躺着选?郑丽文、卢秀燕、韩国瑜齐聚彰化

可爱大王呼
2026-09-06 13:22:00
快讯!乌克兰传来新消息!

快讯!乌克兰传来新消息!

故事终将光明磊落
2026-09-06 09:41:48
普京政权恐被推翻?西方情报头子发出警告,俄政权可能产生巨变!

普京政权恐被推翻?西方情报头子发出警告,俄政权可能产生巨变!

观锐器
2026-09-03 18:13:53
周杰伦晒郑钦文赛后采访照,配文:这个逆转

周杰伦晒郑钦文赛后采访照,配文:这个逆转

懂球帝
2026-09-06 02:42:09
“好像被割一样痛”!母子俩草地休憩后,全身莫名刺痛,医生从皮肤里挑出近30处“细针”

“好像被割一样痛”!母子俩草地休憩后,全身莫名刺痛,医生从皮肤里挑出近30处“细针”

环球网资讯
2026-09-04 19:23:18
中国女游客新加坡街头遭抢!刚用4.4万人民币换的8000新币,连古驰包一起没了...

中国女游客新加坡街头遭抢!刚用4.4万人民币换的8000新币,连古驰包一起没了...

新加坡眼
2026-09-05 19:12:22
上汽新车官宣:9月10日 ,正式预售

上汽新车官宣:9月10日 ,正式预售

科技堡垒
2026-09-05 10:32:59
2026-09-06 16:40:49
BioArt incentive-icons
BioArt
探索生物艺术之奥秘
11049文章数 18540关注度
往期回顾 全部

科技要闻

DeepSeek被曝将采购16万颗华为昇腾950DT

头条要闻

辽宁一处长单位门口遭枪击连中两枪 唯一目击证人发声

头条要闻

辽宁一处长单位门口遭枪击连中两枪 唯一目击证人发声

体育要闻

本西蒙斯加盟国王,不管怎样,回来就好

娱乐要闻

低调富养!郭富城两女儿入读香港名校

财经要闻

亏损高达200亿,昔日彩电霸主走下巅峰!

汽车要闻

带升降立标MPV 岚图梦想家9预售价42.99万起

态度原创

游戏
旅游
健康
手机
亲子

PS实体光盘大砍90%?索尼出面澄清:官方整出大乌龙

旅游要闻

三峡旅游的进与退:新船载客率碾压同行,老景区出售价近乎腰斩

脑梗取栓成功≠活下来,还有这三关

手机要闻

9月手机圈进入神仙打架模式!华为三折叠、小米中折叠明天率先登场

亲子要闻

睡到半夜孩子突然抽筋,比娃更慌的是我......

无障碍浏览 进入关怀版