网易首页 > 网易号 > 正文 申请入驻

Claude把病毒起源算错90年,都是网页惹的祸?

0
分享至


新智元报道


【新智元导读】顶级AI编码一日千里,到了生物学领域却频频翻车,并非模型不够聪明,而是科学数据库至今只为人类点鼠标而生。

最强的模型,栽在了最不该栽的地方:数数上?

近日,Anthropic发了一篇题为《为生物学智能体铺路(Paving the way for agents in biology)》的科学博客,其中一组数字让人后背发凉。


https://www.anthropic.com/research/agents-in-biology

研究者让当前最强的几个科研智能体(Claude、GPT、Biomni、Edison Analysis)做一件听起来毫无难度的事:从NCBI Virus数据库里,准确数出符合条件的病毒序列有多少条。

结果,没有一个能稳定答对。

更离谱的是,同一道题、同一个模型、同一段提示词,问三次,答案能差出几十倍。

Claude Sonnet 4检索一条埃博拉病毒序列查询,第一次返回106条,第二次15条,第三次5条。而正确答案是266条。

是AI搞生物学真的不行吗?

这背后藏着一个扎心的真相,在科学领域,智能体真正的短板并非推理,而是它压根没有一条稳定、可复现、机器能走的路,去把数据准确地取出来。

无专用检索层时,各家系统的平均准确率从16.9%一路散到91.3%,即使是新模型有进步,但残留的错误依旧致命:因为这类任务的及格线,实际上是100%。

少一条记录,可能就让一个诊断试剂看起来覆盖了所有流行毒株,或者让一场疫情的起点被推算错好几周。

那么,问题到底出在哪?

为马车修的城

跑不动汽车

Anthropic给了一个特别形象的比喻:用智能体去跑生物数据库,就像开车穿越一座汽车出现之前建好的老城。

街道也许优雅、讲究,但全是为马车设计的窄巷急弯。零散的数据库、千奇百怪的文件格式、一次性的检索脚本,都是这座老城的一部分。你可以给它加点交通标志、辟几个停车场、拓宽一两条路,但底层的城市布局,从一开始就不是为汽车准备的。

软件的世界正相反。它是一座为车而建的新城:平整的柏油路、清晰的车道、标准化的信号灯。版本控制、文档齐全的API、包管理器,一整套让你从起点高速直达终点的系统,天生就为「车」(也就是智能体)铺好。

所以代码智能体一日千里,生物智能体却原地打转。

软件领域给出的是结构化的数字工作流和可靠接口,一个GitHub issue,生成补丁、跑通测试、当场验证。生物领域给出的是脆弱、异质、依赖具体流程的基础设施,几乎没有简单、可验证又有意义的奖励信号。

具体到NCBI Virus,麻烦更加明显。它本质上是一个网页门户。你在网页上勾选条件:宿主是人类、采样地在非洲、序列长度大于某个值、排除实验室传代样本,网站后台才把这些条件翻译成对底层多个数据库(GenBank、RefSeq、INSDC体系)的查询,再把结果筛出来给你。


NCBI Virus门户首页:检索病毒序列得先在网页上选选项、敲关键词、点筛选,整套交互为人类设计,机器难以直接复用。

它的大量过滤逻辑,是写在网页这一层的,没有对外开放成一个干净的程序接口。

对于人类病毒学家,这只是浏览器里点几下的事。对于机器(智能体),这简直就是灾难。因为智能体能直接调用的,是底层那几个原始API(REST、Datasets、E-utilities),而这些API并不暴露和网页一模一样的过滤语义。

举个具体的例子:

网页上「采样地在非洲」是一个勾选框,背后可能要把几十个国家的元数据字段对齐,还要处理那些字段写法不统一的记录;「含表面糖蛋白」这种条件,光靠序列本身判断不了,得再去GenBank把每条记录的基因/蛋白注释拉回来比对。

这些隐性步骤,网页帮你做了,但原始API不帮你做。

于是智能体只能自己「猜」着把这套逻辑重新拼一遍。拼漏了就少计算(漏掉非洲某国的序列),拼错了就多计算(过滤条件理解偏了)。

这正是Sonnet 4同题三答106、15、5的根因:它每次重建的过滤逻辑都不完全一样。

gget virus要解决的,恰恰就是这件事:把网页界面里那套藏着的过滤行为,重新实现成一个稳定、可复现、机器能直接调用的程序化系统,让智能体不必每次再去猜一遍。

数错一条序列

疫情起点偏移几周

如果你觉得「数错几条序列」无伤大雅,下面这个现场会改变你的看法。

2026年5月,刚果(金)爆发邦地布焦型埃博拉疫情。5月14日,金沙萨的INRB分析了13份血样,次日确认其中8例。到5月29日,WHO报告确诊与疑似病例已超1000例,死亡逾200人。

研究者面前摆着三个生死攸关的问题:这次的病毒和以往差多大?现有诊断还测得出来吗?现有疗法还管不管用?

回答这些,都要把新基因组和NCBI Virus里的历史埃博拉基因组逐一比对。而这套分析的第一步,恰恰就是手动点网页、手动复现一长串复杂过滤条件,再祈祷拉出来的数据集是完整、正确的。

研究者用前面那条埃博拉查询,让Sonnet 4拉数据、建系统发育树,去推算「最近共同祖先时间(TMRCA)」。这是推断一场疫情何时起源的关键量。

人工精校的数据集,给出的TMRCA是2014年1月,和既往报告一致。

而Sonnet 4跑出来的三套数据,两套明显存在残缺。其中一套把推算出的起源时间从2014年拉回到了1922年,凭空多算出九十多年。剩下那套看着像模像样,却漏掉了几内亚的序列,把起源时间悄悄挪到了2014年4月,时间线就此被改写。


扎伊尔型埃博拉系统发育树:左上为人工精校数据,Run 1至3为Sonnet 4检索结果。红色虚线标注TMRCA,灰色代表缺失或错误的国家信息。

抗体疗法分析也一样。研究者想看看maftivimab、MBP134这两款埃博拉抗体疗法瞄准的位点,历史上有没有出现过突变,借此判断疗法还能不能跟上病毒进化。结果Sonnet 4三次跑出三种完全不同的突变图景。


扎伊尔型埃博拉糖蛋白突变分布,红色越深频率越高,球体为maftivimab、MBP134抗体结合位点。最左为人工精校数据,Sonnet 4三次检索(Run 1至3)结果各不相同。

失败模式很清楚:拉大结果集时中途停手就漏数;过滤条件用错,就超数。流感A、HIV-1等记录海量的病毒,偏差最大。过滤条件一旦超过三四个并行,性能直接崩。

错得理直气壮,是科研里最可怕的一种错误。

给老城挖一条机器专用隧道

那么,怎么修?

Anthropic和NCBI的研究者合作,造了一个叫gget virus的东西。

它不是又一个花哨的「AI插件」,而是一个确定性检索层。本质上,它把NCBI Virus网页界面里那套过滤行为,翻译成了可复现的程序化系统。

技术上,它统筹REST、Datasets、E-utilities几个底层系统,自动判断哪些过滤能走API、哪些得本地校验。它处理批量取数,让大结果集被完整拉下来,而不是中途被截断。

它从INSDC体系(NCBI、ENA、DDBJ)下载病毒核苷酸序列和链接元数据,输出FASTA、CSV、JSONL这些人和机器都读得懂的格式,还附带详细日志,告诉你这个结果到底是怎么算出来的。对高频查询,它把数据传输量压缩了超过98%。

效果立竿见影。

接入gget virus后,所有被测系统准确率全部冲到90.0%以上,GPT-5.5飙到99.7%。运行之间的随机抖动几乎消失,稳定性升到0.92到1.00。

最妙的是,模型之间的差距也被大幅抹平了。


VirBench基准上各智能体的检索准确率:接入gget virus(深色)后全部冲过90%,最右为gget virus单独运行。

把这句话翻译一下:加上确定性工具层之后,你用哪个模型,不那么重要了。

这才是真正值得注意的地方。

可靠的数据集构建,本不该取决于你买不买得起最新最贵的模型,也不该取决于你恰好知道哪个模型最适配哪个数据库。便宜的模型配上对的工具,照样稳。

还有一个有趣的细节。在360次运行里,GPT-5.5曾在没被任何提示的情况下,自己找到并用上了gget virus。而那一次,是它在那道题上唯一答对的一次。

工具的价值,模型自己用脚投了票。

真正的胜负手

从模型转向地基

将视野拉远一些,这件事远不止关于病毒。

同样的摩擦,出现在每一个「为人类、而非为智能体设计」的环境里。

几个月前Karpathy讲AI时代的软件,吐槽自己vibe coding做个小网页应用,真要上线(登录、支付、部署),一周时间全耗在浏览器里点来点去。他的总结是:「写代码是最简单的部分。」


Karpathy演讲幻灯片「Docs for people」:Vercel、Clerk等服务的配置文档全是为人类设计的「点这里、填那里」,LLM无法直接调用。

生物学家听完Karpathy的吐槽后,也许颇能够共鸣:这种痛苦,他们可能已经忍了很多年。

gget virus并非个例,同样在搭建这种「上下文引擎」的,还有ToolUniverse、Robin、Biomni等一批生物医学智能体。

难题在于:确定性到底该放在哪一层,又该怎么搭。

当然,也有人会问:模型进步这么快,万一哪天智能体强到能自己穿越混乱门户、对齐ID、正确翻页、出错自愈,gget virus这类「脚手架」会不会瞬间归零?

有可能。但Anthropic的答案是:就算智能体做得到,也不代表每次都该让它从头重新发明一遍。

一个能自己趟过这套混乱取数流程的模型,可能太贵、太慢、太难审计、太难信任,撑不起日常科研。

更何况,哪怕脚手架终将过时,给生物数据库的教训依然成立:从现在起,就得把智能体当成规模化用户,从一开始就为大规模调用而建。

这场竞赛的表面,是模型谁更聪明。往下一层,比的是谁的地基更适合机器奔跑。

我们要模型在生成假设、设计实验时天马行空。但它脚下那层:基因标识符、数据schema、检索逻辑、坐标系统、元数据约定,必须要「无聊」得绝对可靠。

模型曲线还在往上走。

但这一轮真正的胜负手,或许不在云端的大模型,而在底下那层没人愿意修、却决定成败的数据基础设施上。

参考资料:

https://www.anthropic.com/research/agents-in-biology

编辑:元宇


特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
杜库重聚?若杜兰特在火箭不顺想离队 勇士有意促成再联手库里

杜库重聚?若杜兰特在火箭不顺想离队 勇士有意促成再联手库里

醉卧浮生
2026-08-01 06:43:50
两岸结局已定?大陆对台军改名定性,中国军网证实,岛内官兵出逃

两岸结局已定?大陆对台军改名定性,中国军网证实,岛内官兵出逃

共工之锚
2026-08-01 00:22:13
特斯拉拆不掉中国制造

特斯拉拆不掉中国制造

界面新闻
2026-07-31 23:55:06
好尴尬啊!中山大学录取通知书印章被吐槽,网友:就好像是P的,作模板印刷使用,怎么看怎么膈应

好尴尬啊!中山大学录取通知书印章被吐槽,网友:就好像是P的,作模板印刷使用,怎么看怎么膈应

火山詩话
2026-07-31 20:21:52
土耳其设局比亚迪:先诱10亿建厂再索三电技术,WTO裁决全盘落空

土耳其设局比亚迪:先诱10亿建厂再索三电技术,WTO裁决全盘落空

兵鉴史
2026-07-31 16:12:38
连云港失火被困坠楼母女家属发声,3岁女儿去世,丈夫被骂抛弃家人,消防被指太业余

连云港失火被困坠楼母女家属发声,3岁女儿去世,丈夫被骂抛弃家人,消防被指太业余

Mr王的饭后茶
2026-07-31 20:59:38
江苏连云港一住宅起火,母女为避险坠楼 消防回应:事发地无救援设备铺设、作业条件,床单被褥接救未成功

江苏连云港一住宅起火,母女为避险坠楼 消防回应:事发地无救援设备铺设、作业条件,床单被褥接救未成功

封面新闻
2026-08-01 08:58:08
沙特宣布:与科威特、巴林、卡塔尔、巴基斯坦、土耳其、埃及、约旦等13国组建联盟

沙特宣布:与科威特、巴林、卡塔尔、巴基斯坦、土耳其、埃及、约旦等13国组建联盟

鲁中晨报
2026-07-31 12:14:07
年赚348亿,却没人聊它?网易,国内互联网最安静的印钞机

年赚348亿,却没人聊它?网易,国内互联网最安静的印钞机

罗sir财话
2026-07-31 20:55:43
一家三口同在一所学校里各占一席,贾平凹、贾浅浅、贾少龙这条路顺得太齐整了

一家三口同在一所学校里各占一席,贾平凹、贾浅浅、贾少龙这条路顺得太齐整了

一口娱乐
2026-08-01 02:52:33
“ChinaCool”圈粉世界 海外游客解锁避暑新方式

“ChinaCool”圈粉世界 海外游客解锁避暑新方式

极目新闻
2026-08-01 01:05:18
42岁离异包工头,爱上22岁女大学生,同居半年查出竟然是双胞胎

42岁离异包工头,爱上22岁女大学生,同居半年查出竟然是双胞胎

千秋文化
2026-07-30 19:49:31
7月,股民人均亏1.4万!主力为了套住我,竟然让全球科技股暴涨...

7月,股民人均亏1.4万!主力为了套住我,竟然让全球科技股暴涨...

金石随笔
2026-08-01 01:35:35
宁波砸西瓜事件发酵,杨某日范某玲一家接下来面临三大现实难处

宁波砸西瓜事件发酵,杨某日范某玲一家接下来面临三大现实难处

社会日日鲜
2026-07-31 15:40:45
他睡过董卿又甩了,娶小20岁嫩妻躺平大理,如今62岁成人生赢家

他睡过董卿又甩了,娶小20岁嫩妻躺平大理,如今62岁成人生赢家

观察者小海风
2026-07-31 12:15:53
少年捐日军罪证遭“销户”威胁,警方最新回应:已立案并启动保护

少年捐日军罪证遭“销户”威胁,警方最新回应:已立案并启动保护

鲁中晨报
2026-08-01 07:18:03
0.5%的人赚走了85%散户2500亿——泡沫与崩溃中的财富再分配

0.5%的人赚走了85%散户2500亿——泡沫与崩溃中的财富再分配

海右那人
2026-07-31 20:27:37
特朗普被曝下令轰炸伊朗发电厂炼油厂 伊朗警告

特朗普被曝下令轰炸伊朗发电厂炼油厂 伊朗警告

看看新闻Knews
2026-08-01 08:15:17
我国开展为期一年的深化扫黑除恶专项斗争说明了啥?

我国开展为期一年的深化扫黑除恶专项斗争说明了啥?

凤眼论
2026-07-31 17:21:44
阿里巴巴集团主席、布鲁克林篮网队主席蔡崇信与妻子吴明华宣布离婚,商业帝国与球队股权保持不变,两人结婚近30年,育有3个子女

阿里巴巴集团主席、布鲁克林篮网队主席蔡崇信与妻子吴明华宣布离婚,商业帝国与球队股权保持不变,两人结婚近30年,育有3个子女

三湘都市报
2026-08-01 08:26:27
2026-08-01 11:31:00
新智元 incentive-icons
新智元
AI产业主平台领航智能+时代
15837文章数 66988关注度
往期回顾 全部

科技要闻

特斯拉拆不掉中国制造

头条要闻

媒体:安倍晋三给中国添的堵 高市早苗又来一遍

头条要闻

媒体:安倍晋三给中国添的堵 高市早苗又来一遍

体育要闻

欧足联掀桌!因凡蒂诺这次真玩大了?

娱乐要闻

周星驰质疑董宇辉看《大话西游》500遍

财经要闻

宇树造富盛宴:王兴兴将跻身百亿富豪

汽车要闻

听劝!换回机械门把手,这才是碳基生物该开的车!

态度原创

旅游
艺术
房产
数码
亲子

旅游要闻

滨水光影邂逅露台烟火,解锁上海夏夜新玩法

艺术要闻

400年前古画爆红:明代顶级富豪的生活,高级得从不炫富

房产要闻

1700亿砸下!信息量巨大!海南甩出又一个超级规划!

数码要闻

YUNZII推出三模机械键盘IF68:65%小配列,集成旋钮与小竖屏

亲子要闻

暑假才过一半,亲子关系已经崩了?其实是你和孩子的大脑在互掐

无障碍浏览 进入关怀版