网易首页 > 网易号 > 正文 申请入驻

自然·方法:Multi-Embed——给病理形态与分子图谱造一个“共同语言空间”

0
分享至


导语

一张病理切片,能否读出隐藏在细胞中的分子密码?清华大学李梢教授团队提出的 Multi-Embed 模型,通过自监督对比学习,将病理影像与基因表达、蛋白丰度等多组学信息映射到统一的表征空间,不仅提升了跨模态预测的准确性,还揭示了影像与分子特征之间潜在的网络模块化关系。从免疫结构识别、癌变轨迹追踪到预后评估,这项2026年4月24日发表于《自然·方法》的研究为低成本挖掘肿瘤分子信息提供了新路径,也为理解疾病宏观表型与微观机制之间的联系打开了新的窗口。

关键词:多模态学习、病理影像、基因表达、多组学整合、自监督学习、可解释人工智能、肿瘤精准医学

集智编辑团队丨作者


论文题目:Systematically decoding pathological morphologies and molecular profiles with unified multimodal embedding 论文链接:https://www.nature.com/articles/s41592-026-03070-5 发表期刊:Nature Methods 发表时间:2026 年 4月 24 日

一个问题:照片与基因,隔着两种语言

如果只看一张病理切片的照片,就能读出病人的基因表达谱,你信吗?病理切片是癌症诊断的金标准,一张照片的成本只是基因测序的零头;而测序动辄成千上万。一个是宏观的"长相",一个是微观的"分子密码",两者像说着完全不同的语言。过去的模型要么能翻译却讲不清道理,要么有道理却换个医院的数据就失灵——性能和可解释性,鱼和熊掌难以兼得。

一个方法:造一个“共同的翻译空间”

清华大学李梢教授团队把这个想法变成了现实。2026 年 4 月,自动化系副研究员张鹏和博士生高超飞作为共同第一作者,在《自然·方法》上发表论文,提出了名叫 Multi-Embed 的统一多模态嵌入模型。它的思路,是给两种语言造一个"共同的翻译空间"。模型采用自监督对比学习:来自同一份样本的形态特征和分子特征,在空间里被拉近;不同样本的则被推远。

就像培养一名翻译官:不靠词典硬背,而是靠海量对照阅读,自己悟出对应关系。

更关键的是,团队揭示了一条底层规律:宏观影像和微观分子在这个统一空间里,会自发形成"网络模块化"的关联结构。把这条规律编码进模型,可解释性就从设计里自然长了出来——这正是它解决"性能与可解释性不可兼得"两难的钥匙。


图 1:Multi-Embed 方法框架与基准分析。

一组数字:效果有多强


团队系统解析了公共数据库中四万五千人次的临床信息、病理影像与多组学数据,覆盖十二种癌症。跨层次整合精度比此前最优模型提升 1.64 倍。它不仅能从切片照片反推近两万个基因的表达,还能同步推断 DNA 甲基化、蛋白丰度和基因突变——同一张切片,一次性读出多层分子信息,并通过了 CPTAC独立队列、10x Visium / Xenium / Visium HD 等多种空间组学平台的外部验证。

三个应用:从预警到预后

  • 发现"漏网"的免疫结构:在三阴性乳腺癌中识别三级淋巴结构(TLS,一种与抗癌免疫密切相关的免疫组织),甚至发现了病理医生漏标的新区域,并得到专家确认。

  • 画出癌变的时空轨迹:在胃癌研究中描绘从慢性胃炎到极早期胃癌的演变路径,为癌症预警提供新的影像—分子标志物。

  • 预后风险分层:在十二种癌症上挖掘的影像—分子多模态标志物,通过了外部独立临床数据验证;还能预测肿瘤对药物治疗的响应。

由于病理图像恰好是宏观表型与微观分子的交汇点,这套方法还为阐明中医望诊的科学内涵打开了一扇门。


图2:基于 Multi-Embed 的影像—分子多模态融合标志物发现

一点冷静:局限与展望

当然,它也有局限:模型依赖高质量的影像—分子配对数据,数据规模受限时性能会打折扣。未来通过引入更大规模多模态数据和更强的预训练策略,并接入舌像、内镜等更多影像类型,这套"翻译系统"或许能读懂更多疾病的语言。

目前代码已在 GitHub 开源(github.com/Epoch1128/Multi-Embed),团队还搭建了在线交互平台(multiembed.qhdyr.net),方便研究者直接体验。


免疫复杂性读书会


免疫现象是思考生命复杂性的理想场景。免疫系统能在数十亿种可能的病原体中识别威胁并将之消除,也能在机体遭遇损伤时协调资源启动修复。


如何在AI驱动的复杂科学世纪,迭代我们对免疫现象的认知?这是我们组织这场读书会的初衷。


由秦健勇、敖平、雷锦志、张晓实及秦晓玉共同发起,试图基于新生物学2009白皮书从多个维度——物理、数学、AI、临床——实现对免疫现象的迭代理解。




详情请见:

1.

2.

3.

4.

5.

6.

7.

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
这位国军上将,被周恩来斥为千古罪人,新中国唯独不允许他投降

这位国军上将,被周恩来斥为千古罪人,新中国唯独不允许他投降

故史闲谈局
2026-11-08 21:56:05
普京:希望乌克兰实现永久和平,俄只承认唯一分界线,即“国界”

普京:希望乌克兰实现永久和平,俄只承认唯一分界线,即“国界”

奇闻不要看
2026-11-13 11:14:55
旭日旗事件越闹越大!陈宇昕三代都是亲日分子,母亲身份已澄清

旭日旗事件越闹越大!陈宇昕三代都是亲日分子,母亲身份已澄清

平老师666
2026-10-27 20:56:19
马志明正式收郭德纲为义子

马志明正式收郭德纲为义子

大风新闻
2026-11-12 13:53:05
三连败撞上四连胜,这场“顺风球”一点都不顺

三连败撞上四连胜,这场“顺风球”一点都不顺

老何绿茵笔记
2026-11-14 00:25:03
重庆一高校新生在迎新晚会上抽中“免费吃食堂一年”,学校:只有一个名额,每天30元餐券,中奖学生可在食堂任意窗口使用

重庆一高校新生在迎新晚会上抽中“免费吃食堂一年”,学校:只有一个名额,每天30元餐券,中奖学生可在食堂任意窗口使用

极目新闻
2026-11-12 20:50:12
差点认不出!54岁巨石强森大变样,褪去肌肉演一个温柔古怪的老人

差点认不出!54岁巨石强森大变样,褪去肌肉演一个温柔古怪的老人

乡野小珥
2026-11-09 11:14:37
黄仁勋辞职出局!有人说老黄是美国这几十年最好的“美国梦”广告代言人了,没想到下场是这样

黄仁勋辞职出局!有人说老黄是美国这几十年最好的“美国梦”广告代言人了,没想到下场是这样

静若梨花
2026-11-13 10:02:43
全世界最珍贵的树:位于浙江,全球只有一棵,365天都有警卫看守

全世界最珍贵的树:位于浙江,全球只有一棵,365天都有警卫看守

金哥说新能源车
2026-11-13 10:55:58
宋雨琦转发祖国统一内容,遭部分韩国网民攻击

宋雨琦转发祖国统一内容,遭部分韩国网民攻击

观察者网
2026-11-13 14:46:10
DeepSeek发布全家桶应用API

DeepSeek发布全家桶应用API

界面新闻
2026-11-13 22:30:47
比恒大更惊人,中国第二大民企轰然倒下,负债7500亿,创始人落网

比恒大更惊人,中国第二大民企轰然倒下,负债7500亿,创始人落网

大鱼简科
2026-11-12 09:35:28
黄乐出轨黄仁勋名满天下,丈夫康伟却在监狱里偷偷落泪

黄乐出轨黄仁勋名满天下,丈夫康伟却在监狱里偷偷落泪

微评社
2026-11-12 09:07:38
属兔人,十年大运即将开启!这3件事做好,贵人机遇不请自来

属兔人,十年大运即将开启!这3件事做好,贵人机遇不请自来

一口娱乐
2026-11-13 09:05:21
曝国王与文森特现已进行会面 国王是目前向其出价最高的球队

曝国王与文森特现已进行会面 国王是目前向其出价最高的球队

北青网-北京青年报
2026-11-13 07:59:02
美股异动 | 美联储官员再放鹰 费城半导体指数跌超5% 半导体板块集体走低

美股异动 | 美联储官员再放鹰 费城半导体指数跌超5% 半导体板块集体走低

和讯网
2026-11-14 00:26:05
四川省纪委监委最新通报!

四川省纪委监委最新通报!

新浪财经
2026-11-13 17:32:26
乌克兰前总理顾问在莫斯科汽车爆炸中受伤

乌克兰前总理顾问在莫斯科汽车爆炸中受伤

新华社
2026-11-13 20:12:09
黄仁勋辞职第一天!NVIDIA员工集体挽留、竞争对手迎来机会:更多风波还在后面

黄仁勋辞职第一天!NVIDIA员工集体挽留、竞争对手迎来机会:更多风波还在后面

快科技
2026-11-13 19:12:21
美国大豆为什么非要卖给中国?其实,站在美国的角度,三年不卖给中国大豆,是美国农业体系里一根最敏感的骨头被抽走了

美国大豆为什么非要卖给中国?其实,站在美国的角度,三年不卖给中国大豆,是美国农业体系里一根最敏感的骨头被抽走了

扶苏聊历史
2026-10-31 11:50:15
2026-11-14 01:07:00
集智俱乐部 incentive-icons
集智俱乐部
科普人工智能相关知识技能
6141文章数 4692关注度
往期回顾 全部

科技要闻

黄仁勋辞职,马斯克们抱不平!

头条要闻

媒体:出轨的巨头很多 只有黄仁勋犯了大忌"非走不可"

头条要闻

媒体:出轨的巨头很多 只有黄仁勋犯了大忌"非走不可"

体育要闻

坎宁安52分:肯吃苦的人就有吃不完的苦

娱乐要闻

陈晓楠对话厉娜和许飞引全网热议

财经要闻

黄仁勋和英伟达的6大难题还在后头

汽车要闻

原厂宽体 2027款领克03家族上市限时10.38万起

态度原创

本地
时尚
房产
公开课
军事航空

本地新闻

乌兰察布:以前种土豆,现在种Token

算不懂双十一,是数学不好,还是你太单纯?

房产要闻

从林屿间到林屿熙岸,招商蛇口在崖州湾为何总出爆款?

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

普京拒绝外国军队驻扎乌克兰

无障碍浏览 进入关怀版