网易首页 > 网易号 > 正文 申请入驻

OpenAI推出MedChemBench基准,评估AI辅助药物研发能力

0
分享至

IT之家 11 月 21 日消息,当地时间 11 月 20 日,OpenAI 发布 MedChemBench 基准,用于评估 AI 模型在药物化学研究中的推理能力,包括识别分子结构、解读实验结果、比较化合物及预测其性质等。OpenAI 表示,模型在重建分子结构和解释实验依据方面表现较强,但在化合物筛选和数值性质预测方面仍有明显提升空间。


IT之家从官方介绍获悉,该基准包含 99 道题目,取自 117 篇论文与专利,涉及 761 个不同分子结构。多数题目向模型提供研究进行到某一节点时的上下文,包括生物靶点、研究人员的目标、此前研究过的化合物与部分实验结果。

官方将评测分为四个部分,IT之家附具体内容如下:

  • 分子结构:依据题目给出的结构图与化学基团组装分子,考察原子连接与立体化学是否正确;
  • 科学解释:解释需由给定证据支撑,例如为何在若干化合物中选择某一个;
  • 排序与选择:化合物排序与最终选择是否符合题目要求;
  • 性质预测:与原始材料给出的数值、类别是否一致,涵盖实测与计算得到的分子性质。

据官方公布信息,在 xhigh 推理档下,GPT-6.2 Astra 获得 84.5% 的可用分数,GPT-6 Astra 为 83.3%,GPT-6.1 Sol 为 82.0%,GPT-5.6 Sol 为 58.2%。官方称,提高推理档位可带来分数提升,但模型之间的差距依然明显。


分项表现上,Astra 在 xhigh 档的分子结构部分拿到 95.4% 的可用分数,而在化合物选择与数值性质预测两项上仅获约一半分数。

官方举例称,一道题目要求模型以给定中心结构与两个侧基组装分子,并保留一个 18 原子环。

在 11 个模型共用的 xhigh 档下,GPT-6 Astra 的十次回答全部正确;GPT-5.6 Sol 与 GPT-5.6 Luna 十次全部出错,前者组装出的环只有 15 个原子,后者把分子拆成两个互不相连的片段。


另一道题取材于 PRMT5 抑制剂研究,PRMT5 是肿瘤药物研发中受到关注的蛋白。模型需要预测三种相关化合物在细胞内阻断 PRMT5 的强度、穿过细胞屏障的难易,以及在实验室检测中被肝酶降解的速度。

官方在题目中隐去的后续实验显示存在取舍:化合物 23 在更低浓度下即可在细胞内阻断 PRMT5,化合物 24 更易穿过细胞屏障,在肝酶检测中的降解速度也更慢。

官方表示,这些结果并不能确定模型是否能够发现新药或改善实验室决策。不能排除之前接触过已发表资料的可能性,每一次回应都是一次没有工具、没有反馈或新实验的尝试。虽然基准测试基于历史证据而非真实药物发现,其结果有助于识别模型在哪些方面进展,哪些仍面临挑战。团队相信 MedChemBench 将支持持续的进步,并期待随着模型的进步与应用领域分享最新进展。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
炸锅!曼联头号巨星或将离队!波切蒂诺面临致命难题

炸锅!曼联头号巨星或将离队!波切蒂诺面临致命难题

澜归序
2026-11-22 09:46:15
人伦之乱(笑话)

人伦之乱(笑话)

乡村中原风
2026-11-20 14:36:33
冲上热搜!全军暂停采购八马茶业

冲上热搜!全军暂停采购八马茶业

深蓝财经
2026-11-21 16:09:33
张水华黄马夺冠刷新生涯最佳获5000元奖金,辞职后4破PB势不可挡

张水华黄马夺冠刷新生涯最佳获5000元奖金,辞职后4破PB势不可挡

杨华评论
2026-11-22 09:53:48
世青赛团体4强诞生:国乒大获全胜!轰6个3-0比分,小将不失一局

世青赛团体4强诞生:国乒大获全胜!轰6个3-0比分,小将不失一局

吴锎旅行ing
2026-11-22 10:41:17
首日37.9亿美元,这家店只卖出5份《GTA6》

首日37.9亿美元,这家店只卖出5份《GTA6》

报错免疫体
2026-11-21 15:17:54
故事:湖南93岁禽兽周其生,因爱喝牛奶而伤害女孩,犯罪细节曝光

故事:湖南93岁禽兽周其生,因爱喝牛奶而伤害女孩,犯罪细节曝光

卡西莫多的故事
2025-02-21 17:17:06
重磅预警!高盛“恐慌指数”逼近最大值:美股下周恐还有一波大规模抛售

重磅预警!高盛“恐慌指数”逼近最大值:美股下周恐还有一波大规模抛售

财联社
2026-11-21 13:56:13
“你们吃哪家的饭,端哪家的碗?”全程5小时播放外国视频,小伙质问乘务长

“你们吃哪家的饭,端哪家的碗?”全程5小时播放外国视频,小伙质问乘务长

蝴蝶花雨话教育
2026-11-14 00:05:16
刚9分惜败掘金!火箭赛后传来主帅乌度卡消息,阿门说的非常实在

刚9分惜败掘金!火箭赛后传来主帅乌度卡消息,阿门说的非常实在

阅尽天下大事
2026-11-21 18:04:36
邝港智称谭方骏喜欢自己,为传宗接代三人共同生活,蔡天凤再婚是为了钱

邝港智称谭方骏喜欢自己,为传宗接代三人共同生活,蔡天凤再婚是为了钱

开开森森
2026-11-19 17:30:57
汪小菲带家人巴厘岛度假,小玥儿头发浓密已是大姑娘!汪宝好呆萌

汪小菲带家人巴厘岛度假,小玥儿头发浓密已是大姑娘!汪宝好呆萌

娱乐团长
2026-11-22 11:46:33
武磊在帮助上港队拿到足协杯决赛资格之后,在社媒更新发声做出重要决定

武磊在帮助上港队拿到足协杯决赛资格之后,在社媒更新发声做出重要决定

张丽说足球
2026-11-22 11:23:04
我在广东做男保姆,与女主人同吃同住,工资过万,却有苦不能说

我在广东做男保姆,与女主人同吃同住,工资过万,却有苦不能说

千秋历史
2026-07-18 18:50:50
44岁于晓光做梦也想不到,韩国总统访华,带火了他47岁的媳妇!

44岁于晓光做梦也想不到,韩国总统访华,带火了他47岁的媳妇!

落雪听梅a
2026-11-21 12:14:20
2015年四川一名农民用冰糖搭配明矾冒充冰毒,每月售卖160斤积攒百万资产,落网之后警方无法以贩毒罪名对他定罪

2015年四川一名农民用冰糖搭配明矾冒充冰毒,每月售卖160斤积攒百万资产,落网之后警方无法以贩毒罪名对他定罪

唠叨说历史
2026-11-05 18:34:41
28岁女子戴假牙套相亲走红!本想逼退相亲男,谁料父母提前把原装照片给发了过去

28岁女子戴假牙套相亲走红!本想逼退相亲男,谁料父母提前把原装照片给发了过去

王老师你还好吗
2026-11-11 21:45:48
IGN:《GTA6》高人气美女很恐怖!杰森躲过一劫

IGN:《GTA6》高人气美女很恐怖!杰森躲过一劫

游民星空
2026-11-20 12:11:29
史无前例!NBL四队通杀CBA!豪门接连翻车,恢复升降级终结CBA混子时代

史无前例!NBL四队通杀CBA!豪门接连翻车,恢复升降级终结CBA混子时代

篮球圈里的那些事
2026-11-22 15:03:56
影后隆胸不藏着!劳伦斯当众拉开披肩自曝C罩杯,这坦荡真绝了!

影后隆胸不藏着!劳伦斯当众拉开披肩自曝C罩杯,这坦荡真绝了!

动物奇奇怪怪
2026-11-21 08:25:15
2026-11-22 16:31:00
IT之家
IT之家
爱科技,爱这里 - 前沿科技人气平台
380756文章数 607745关注度
往期回顾 全部

科技要闻

Anthropic收涨17.1%,市值一度破2万亿美元

头条要闻

常州网红副市长蒋鹏举履新江苏理工学院校长

头条要闻

常州网红副市长蒋鹏举履新江苏理工学院校长

体育要闻

全场挨打1比4溃败 阿隆索已过保质期?

娱乐要闻

杨迪戴东北绒帽在黑龙江漠河舞厅跳舞

财经要闻

金价跌破3550美元,分析称短期下行未逆转

汽车要闻

旗舰纯电大六座 2027款岚图泰山将于广州车展预售

态度原创

艺术
本地
时尚
手机
军事航空

艺术要闻

2026第七届民族美术作品展 油画选三

本地新闻

43年起落记忆倒计时,去厦门高崎领绝版登机牌!

这些才是适合50岁女性的穿搭!衣服不花哨、不老气,得体又自然

手机要闻

终抵千万里程碑:曝华为Mate 80系列手机终端销量破1000万台,标准版占比近58%

军事要闻

伊朗革命卫队称袭击美军在巴林两处基地防空雷达

无障碍浏览 进入关怀版