网易首页 > 网易号 > 正文 申请入驻

Nat Biomed Eng | 李瑞江团队开发通用的多示例学习框架—nnMIL,应用于病理计算

0
分享至


随着计算病理学和病理基础模型(pathology foundation models)的快速发展,现如今研究人员能够从全切片病理图像(whole-slide images,WSIs)中提取具有丰富语义信息的patch-level特征。然而,临床预测最终通常需要在整张切片甚至患者层面做出判断。因此,如何将大量patch特征有效整合为稳定、准确的slide-level预测,是计算病理学中的一个关键问题。

目前,多示例学习(multiple instance learning,MIL)是解决这一问题的主要方法,代表性工作包括 ABMIL1、CLAM【2】、DSMIL【3】和 TransMIL【4】等。这些方法通过设计不同的网络结构,将大量 patch-level 特征聚合为 slide-level 表征。但现有MIL方法仍存在一些不足。首先,由于不同WSI包含的patch数量差异很大,传统MIL训练过程中每次迭代只能处理一张全切片图像(batch size = 1),限制了模型训练的效率和稳定性。其次,现有研究更多关注设计新的MIL网络结构,而对于 batch size、采样策略和训练配置等因素缺乏系统研究。实际上,即使使用相同的网络结构,不同的训练策略也可能带来明显不同的性能。

为了解决这些问题,2026年8月25日,斯坦福大学李瑞江团队在Nature Biomedical Engineering发表了文章nnMIL: a generalizable multiple instance learning framework for computational pathology5】。研究团队受到医学图像分割领域经典方法nnU-Net【6】的启发,提出了nnMIL(no-new MIL),一个简单、通用的多示例学习框架,旨在连接病理基础模型的patch-level特征和slide-level临床预测。与不断设计更加复杂的 MIL 网络不同,nnMIL更加关注如何通过系统优化训练策略,提高模型的性能、稳定性和泛化能力。研究团队在近40,000张 WSI、35个临床任务以及4种病理基础模型上对 nnMIL 进行了系统评估。相关任务涵盖疾病诊断和分型、分子生物标志物预测以及泛癌种预后预测。研究使用了 GigaPath【7】、H-Optimus-0【8】、UNI【9】和 Virchow2【10】四种病理基础模型。7种现有MIL方法相比,nnMIL在不同任务和不同基础模型上总体表现更加稳定,并取得了更好的预测性能。


与现有研究相比,nnMIL有几个主要贡献:

研究思路。现有 MIL 研究通常重点关注设计新的网络结构,而 nnMIL 更强调训练策略本身的重要性。研究表明,相比不断增加模型复杂度,系统优化 MIL 的训练方式同样可以明显提高模型的性能、稳定性和泛化能力。进一步的实验发现,将 nnMIL 的训练策略应用到已有的 ABMIL 和 DSMIL 中,也能够提升这些模型的整体表现,说明这种训练思路并不局限于 nnMIL本身。

技术改进。nnMIL 通过随机采样固定数量的patch,将原本长度不同的输入转换为固定大小的输入,从而实现大batch训练。同时,研究团队进一步加入特征采样和平衡采样,并采用基于规则的参数配置方式,使模型能够更加稳定地适用于不同数据集和任务。其核心思想与 nnU-Net 类似: 与其针对每个数据集反复进行复杂的人工调参,不如将经过验证的经验总结为一套简单、可复用的配置规则。

临床可靠性。nnMIL不仅输出最终的slide-level预测,还能够通过特征维度滑窗推理获得多个预测结果,并进一步估计模型的不确定性。研究发现,不确定性较高的病例更容易出现预测错误,因此可以帮助筛选出需要病理学家进一步复核的复杂病例。对于分子标志物预测,高不确定性的病例也可以进一步考虑进行额外的分子检测。

nnMIL具有广泛的应用前景。随着GigaPath、UNI、Virchow2等病理基础模型不断发展,如何将强大的patch-level特征转化为可靠的slide-level临床预测将变得越来越重要。nnMIL提供了一种简单、通用且易于扩展的解决方案,可以应用于疾病诊断、分子标志物预测和患者预后评估等多种计算病理任务,为病理基础模型进一步走向临床应用提供了新的方法。


图1: nnMIL模型结构及临床验证

https://www.nature.com/articles/s41551-026-01767-8

参考文献

[1] Ilse M., Tomczak J., Welling M. Attention-based deep multiple instance learning. International Conference on Machine Learning, 2127–2136 (2018).

[2] Lu M.Y., et al. Data-efficient and weakly supervised computational pathology on whole-slide images. Nature Biomedical Engineering 5, 555–570 (2021).

[3] Li B., Li Y., Eliceiri K.W. Dual-stream multiple instance learning network for whole slide image classification with self-supervised contrastive learning. IEEE/CVF Conference on Computer Vision and Pattern Recognition, 14318–14328 (2021).

[4] Shao Z., et al. TransMIL: transformer based correlated multiple instance learning for whole slide image classification. Advances in Neural Information Processing Systems 34, 2136–2147 (2021).

[5] Luo X., Xiang J., Ji Y., Li R. nnMIL: a generalizable multiple instance learning framework for computational pathology. Nature Biomedical Engineering (2026). https://doi.org/10.1038/s41551-026-01767-8.

[6] Isensee F., Jaeger P.F., Kohl S.A., Petersen J., Maier-Hein KH. nnU-Net: a self-configuring method for deep learning-based biomedical image segmentation. Nature Methods 18, 203–211 (2021).

[7] Xu H., et al. A whole-slide foundation model for digital pathology from real-world data. Nature 630, 181–188 (2024).

[8] Saillard C., et al. H-optimus-0. https://github.com/bioptimus/releases/tree/main/models/h-optimus/v0 (2024).

[9] Chen R.J., et al. Towards a general-purpose foundation model for computational pathology. Nature Medicine 30, 850–862 (2024).

[10] Zimmermann E., et al. Virchow2: scaling self-supervised mixed magnification models in pathology. arXiv:2408.00738 (2024).

学术合作组织

(*排名不分先后)


战略合作伙伴

(*排名不分先后)

推荐直播

转载须知

【非原创文章】本文著作权归文章作者所有,欢迎个人转发分享,未经作者的允许禁止转载,作者拥有所有法定权利,违者必究。

BioArt

Med

Plants

人才招聘


点击主页推荐活动

关注更多最新活动!


特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
10万亿转移支付的真相!一旦沿海税源萎缩,体制内会面临什么?

10万亿转移支付的真相!一旦沿海税源萎缩,体制内会面临什么?

王二哥老搞笑
2026-09-06 05:15:48
因苹果对质量要求极其严格,消息称折叠屏iPhone初期日产仅数百部

因苹果对质量要求极其严格,消息称折叠屏iPhone初期日产仅数百部

IT之家
2026-09-04 21:29:03
每体:德科保密数月,巴萨签下戈登

每体:德科保密数月,巴萨签下戈登

懂球帝
2026-09-06 10:10:21
哈兰德与女友长相出众,女友长得像洋娃娃,十分登对,浪漫幸福

哈兰德与女友长相出众,女友长得像洋娃娃,十分登对,浪漫幸福

娱你同欢
2026-08-30 18:30:43
玩大了,伊朗导弹砸向美军航母,这场“胆小鬼游戏”何时是个头?

玩大了,伊朗导弹砸向美军航母,这场“胆小鬼游戏”何时是个头?

淡然小司
2026-09-06 06:20:49
真的太贵了!iPhone 18 Pro 售价遭提前泄露

真的太贵了!iPhone 18 Pro 售价遭提前泄露

XCiOS俱乐部
2026-09-05 20:03:52
向中国索赔不到24小时,尼泊尔突然改口:我不要钱了!

向中国索赔不到24小时,尼泊尔突然改口:我不要钱了!

无意争春
2026-09-05 02:31:34
看蒋万安给他三个儿子起的名字,终于暴露了本性,再也藏不住了

看蒋万安给他三个儿子起的名字,终于暴露了本性,再也藏不住了

凡人侃史
2026-09-04 12:08:37
海航双胞胎姐妹花空姐,同时怀孕了

海航双胞胎姐妹花空姐,同时怀孕了

微微热评
2026-09-03 12:18:33
索林尴尬了!继德国乒协停办WTT比赛后,日乒也对WTT赛程提出质疑

索林尴尬了!继德国乒协停办WTT比赛后,日乒也对WTT赛程提出质疑

紧跟时代脉搏
2026-09-06 02:18:23
最牛美女处长,1000天和男上司开房410次,临时工晋升财务副处长

最牛美女处长,1000天和男上司开房410次,临时工晋升财务副处长

就一点
2026-09-05 14:09:14
至今仍健在的开国将帅仅剩一位,今年已103岁高龄,身体依旧硬朗

至今仍健在的开国将帅仅剩一位,今年已103岁高龄,身体依旧硬朗

历史人文2
2026-09-05 14:48:34
媒体人曝刘翔15年就不交分成费,体育局的活祖宗,常年旅居国外

媒体人曝刘翔15年就不交分成费,体育局的活祖宗,常年旅居国外

KG说球
2026-09-04 11:30:11
有什么用?热刺6大前锋总转会费2.5亿欧,但球队前3轮0进球

有什么用?热刺6大前锋总转会费2.5亿欧,但球队前3轮0进球

懂球帝
2026-09-06 00:12:18
广东女生高考失误仅540分,被四川师范大学录取,复读一周就决定跑路,本人回应:害怕再失败一次!

广东女生高考失误仅540分,被四川师范大学录取,复读一周就决定跑路,本人回应:害怕再失败一次!

王大嘴评说
2026-09-05 00:02:55
一家四口入住酒店客房惊现蝙蝠,家长两天后在5岁儿子腰间发现不明伤口,注射狂犬疫苗等费用暂未报销,酒店:已报保险

一家四口入住酒店客房惊现蝙蝠,家长两天后在5岁儿子腰间发现不明伤口,注射狂犬疫苗等费用暂未报销,酒店:已报保险

极目新闻
2026-09-05 21:46:27
日本队惨败!同组最强敌73-82爆冷,世界杯A组积分榜:3队同分

日本队惨败!同组最强敌73-82爆冷,世界杯A组积分榜:3队同分

菜菜说体育
2026-09-06 01:46:26
马科斯阴谋落空,复仇战打响,17万菲军选边站,老杜家族迎来转机

马科斯阴谋落空,复仇战打响,17万菲军选边站,老杜家族迎来转机

观史搜寻着
2026-09-06 03:13:26
澳总理批中国导弹试射,被当场反问:美国67次核试验怎么不说?

澳总理批中国导弹试射,被当场反问:美国67次核试验怎么不说?

算力游侠
2026-09-05 09:11:31
别被表面和谐骗了!《花儿与少年8》嘉宾初见,吴君如和殷桃的相处值得细品

别被表面和谐骗了!《花儿与少年8》嘉宾初见,吴君如和殷桃的相处值得细品

浑水默娱
2026-09-05 13:00:24
2026-09-06 12:31:00
BioArt incentive-icons
BioArt
探索生物艺术之奥秘
11049文章数 18540关注度
往期回顾 全部

科技要闻

DeepSeek被曝将采购16万颗华为昇腾950DT

头条要闻

男子1.38万捡漏二手大众CC 懂车帝称操作失误未发货

头条要闻

男子1.38万捡漏二手大众CC 懂车帝称操作失误未发货

体育要闻

本西蒙斯加盟国王,不管怎样,回来就好

娱乐要闻

低调富养!郭富城两女儿入读香港名校

财经要闻

亏损高达200亿,昔日彩电霸主走下巅峰!

汽车要闻

带升降立标MPV 岚图梦想家9预售价42.99万起

态度原创

数码
手机
健康
亲子
本地

数码要闻

狼蛛NOVA98系列机械键盘新增“桃雾粉”“尘雾白”上市

手机要闻

vivo X500系列手机开启预约

脑梗取栓成功≠活下来,还有这三关

亲子要闻

揪心一幕:幼儿园开学,孩子哭闹、甚至逃跑,家长不舍地扒墙观望

本地新闻

扒完小作文,富豪们私藏的度假胜地有多绝

无障碍浏览 进入关怀版