网易首页 > 网易号 > 正文 申请入驻

分子搜索翻车7次后,我换了个思路把漏检率砍了40%

0
分享至


一个做AI搜索的工程师,把向量数据库用在了阿司匹林上。结果传统方法漏掉的相似分子,被这套系统捞回来了。

David Vybornov(下文称D)在Medium发了一篇技术复盘。他原本只想验证一个直觉:既然SMILES能把分子写成字符串,transformer(变换器,一种神经网络架构)能不能像理解句子一样理解化学结构?

答案是可以。但过程比他预想的更曲折。

传统搜索的盲区:指纹碰撞与信息蒸发

化学信息学里,分子相似性搜索的主流方案叫指纹相似度。流程很标准:用RDKit生成Morgan指纹(一种记录分子片段的固定长度位向量),计算查询分子与候选分子的Tanimoto分数(两向量重叠度,0到1),按分数排序。

这套方案快、简单、可解释,但有个致命伤:压缩即丢失。

分子被哈希成固定长度的位向量时,不同子结构可能撞进同一个比特位。这种碰撞在查询前就发生了——你搜索的不是分子本身,而是一个已经失真的副本。

D在测试中发现,肉眼明显相关的化合物,指纹系统给不出高分。子结构重叠度不够,Tanimoto分数就把它们过滤掉了。化学家说的"骨架跃迁"(scaffold hopping)——两个分子通过不同核心结构作用于同一生物靶点——正是这类系统的盲区。

他数了数,自己手头的测试集里,这类漏检大概占四成。


ChemBERTa的赌注:把分子当句子读

D的替代方案是ChemBERTa,一个专门在SMILES字符串上预训练的transformer。SMILES(简化分子线性输入规范)把三维化学结构编码成文本,比如阿司匹林的字符串是CC(=O)Oc1ccccc1C(=O)O

他的流水线是这样的:

1. 用ChemBERTa把SMILES嵌入成768维向量
2. 把向量+分子属性元数据(分子量、脂水分配系数等)写进Qdrant向量数据库
3. 检索时同时做相似度搜索+payload过滤(在检索阶段就筛选属性)

关键设计:向量负责"长得像",payload负责"符合硬指标"。

这和纯向量搜索的区别在于,属性过滤发生在ANN(近似最近邻)检索过程中,而不是事后二次筛选。Qdrant的Python客户端当时刚支持这个特性,D算是早期尝鲜者。

实测结果:找回那40%的漏网之鱼

D跑了两组对比实验。同一批查询分子,分别用指纹相似度和向量相似度检索,人工复核结构相关性。

向量系统捞回了一批指纹方法完全遗漏的候选。这些分子的共同特征是:整体拓扑相似,但局部片段哈希冲突严重,导致指纹重叠度低。


「ChemBERTa似乎捕捉到了某种'化学语法'——不是原子级别的匹配,而是功能基团在序列中的相对位置和上下文。」D在文中写道。

但他也记录了失败案例。某些光学异构体(镜像分子)在SMILES中字符串差异极小,向量距离却拉得很开;而另一些字符串差异大的分子,向量反而靠得很近。嵌入空间的"近"不等于化学意义的"近",这个问题没有消失,只是换了个形式。

系统的裂缝:哪里会崩

D列了三处明确的失效模式:

训练分布外(OOD)分子。 ChemBERTa在ChEMBL等主流化学数据库上训练,遇到新型合成化合物或天然产物中的罕见骨架,嵌入质量断崖下跌。

立体化学敏感度不足。 SMILES本身可以编码立体信息(@符号标记手性中心),但ChemBERTa对这类标记的学习似乎不够精细。两个生物活性截然不同的对映体,向量余弦相似度可能高达0.95。

属性过滤的边界效应。 当payload条件过于严格(比如同时限定分子量<300、脂水分配系数2-3、可旋转键<5),向量检索的候选池被压缩到极小,近似算法的精度优势丧失,退化成暴力扫描。

他在GitHub仓库里放了一个Streamlit演示界面,上传SMILES或手绘结构,实时对比指纹vs向量的Top-10结果。肉眼可见的差异,比任何指标都直观。

D最后提到一个未解的问题:向量空间里的"化学相似性"到底对应什么?是反应性?是靶点结合模式?还是纯粹的训练数据统计偏差?

他现在的实验规模还回答不了。但如果有人想在10亿级分子库里做骨架跃迁筛选,这套方案的漏检率曲线,值得和指纹方法并排画一画。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
人民日报、环球时报接连发出警示:日本的军国主义獠牙已露出来了

人民日报、环球时报接连发出警示:日本的军国主义獠牙已露出来了

贱议你读史
2026-03-24 00:30:08
现实中的大龄剩女最后妥协了吗?网友爆笑评论,真是一言难尽。

现实中的大龄剩女最后妥协了吗?网友爆笑评论,真是一言难尽。

侃神评故事
2026-03-25 11:30:09
仅差147次!老詹迎来神级里程碑,保罗的纪录也很难保住了

仅差147次!老詹迎来神级里程碑,保罗的纪录也很难保住了

世界体育圈
2026-03-27 20:33:34
泰国征兵拿张凌赫做广告 泰陆军发言人:支持!

泰国征兵拿张凌赫做广告 泰陆军发言人:支持!

看看新闻Knews
2026-03-26 21:37:02
打虎!郭永航被查

打虎!郭永航被查

新京报政事儿
2026-03-27 18:33:38
徐州女孩远嫁天水,婚姻不幸身患重病,42岁去世!网友:不要远嫁

徐州女孩远嫁天水,婚姻不幸身患重病,42岁去世!网友:不要远嫁

火山詩话
2026-03-27 06:47:18
湖北最低5℃!暴雨、雷暴大风即将抵达

湖北最低5℃!暴雨、雷暴大风即将抵达

鲁中晨报
2026-03-27 08:49:03
男子用专业设备给妻子拍照遭景区多次驱赶,万岁山武侠城道歉

男子用专业设备给妻子拍照遭景区多次驱赶,万岁山武侠城道歉

闪电新闻
2026-03-27 17:27:59
突然爆火!和黄金一样“一天一个价”,网友:终于不用放家里吃灰了

突然爆火!和黄金一样“一天一个价”,网友:终于不用放家里吃灰了

山东教育电视台
2026-03-25 21:09:16
社保基金多次在A股大跌时果断加仓

社保基金多次在A股大跌时果断加仓

证券时报
2026-03-28 06:22:03
比赖清德更狂的人出现了,如果她当台湾地区领导人,我军该怎么办

比赖清德更狂的人出现了,如果她当台湾地区领导人,我军该怎么办

听风喃
2026-03-27 17:40:05
随着维尔茨飙2世界波+2妙传+比分4-3,德国逆转劲旅,迎开门红

随着维尔茨飙2世界波+2妙传+比分4-3,德国逆转劲旅,迎开门红

侧身凌空斩
2026-03-28 05:38:01
150亿,拼多多开始搞自营了

150亿,拼多多开始搞自营了

财天COVER
2026-03-27 12:50:36
出场38分钟便被换下,天空体育记者:马杜埃凯可能是左膝受伤

出场38分钟便被换下,天空体育记者:马杜埃凯可能是左膝受伤

懂球帝
2026-03-28 06:38:07
72年李讷生娃,江青面无表情:我们家的孩子不叫姥姥,叫我奶奶

72年李讷生娃,江青面无表情:我们家的孩子不叫姥姥,叫我奶奶

海佑讲史
2026-03-27 11:45:12
吴京戳脸“一按一个坑”,网友劝其注意身体,本人回应:含水量高了些,身体还不错,谢谢大家关心!

吴京戳脸“一按一个坑”,网友劝其注意身体,本人回应:含水量高了些,身体还不错,谢谢大家关心!

极目新闻
2026-03-28 00:50:32
苹果史上最美正面!iPhone 18 Pro灵动岛史诗级瘦身

苹果史上最美正面!iPhone 18 Pro灵动岛史诗级瘦身

快科技
2026-03-27 15:01:41
美盟友正式下令:放开手脚打美军以军,不到1天,炸毁美军直升机

美盟友正式下令:放开手脚打美军以军,不到1天,炸毁美军直升机

风干迷茫人
2026-03-27 15:59:36
你有什么至今想起都后怕的事?网友:戏多的要死,直接报警

你有什么至今想起都后怕的事?网友:戏多的要死,直接报警

带你感受人间冷暖
2026-02-13 00:05:11
德国外交部长:美国和伊朗在间接接触,而且有直接会晤的考虑,可能很快在巴基斯坦发生

德国外交部长:美国和伊朗在间接接触,而且有直接会晤的考虑,可能很快在巴基斯坦发生

潇湘晨报
2026-03-27 20:14:03
2026-03-28 08:08:49
闪存猎手
闪存猎手
全网蹲好价的野生捕手,算力与羊毛都不可辜负。
293文章数 0关注度
往期回顾 全部

科技要闻

杨植麟张鹏夏立雪罗福莉,聊龙虾、聊涨价

头条要闻

特朗普称暂停打击伊能源设施不到1天 美以空袭伊核设施

头条要闻

特朗普称暂停打击伊能源设施不到1天 美以空袭伊核设施

体育要闻

邵佳一:足球就像一场马拉松

娱乐要闻

范玮琪加盟,官宣《浪姐7》遭全网抵制

财经要闻

我在小吃培训机构学习“科技与狠活”

汽车要闻

与众08,金标大众不能输的一战

态度原创

时尚
艺术
旅游
教育
军事航空

推广中奖名单-更新至2026年3月11日推广

艺术要闻

一位好“色”的摄影师

旅游要闻

日照岚山“打飞的”赏春成新时尚

教育要闻

语文老师解读中西历险本质区别

军事要闻

伊朗:已组织超100万人为地面战斗做准备

无障碍浏览 进入关怀版