网易首页 > 网易号 > 正文 申请入驻

服贸观澜|方升-Code 2.0发布,大模型基准测试体系迎来新标准

0
分享至

2026年,AI大模型正从通用对话走向代码生成、智能体协作等产业落地场景,模型代码能力的标准化评估需求也日益凸显。


9月11日下午,中国信息通信研究院(以下简称"中国信通院")在2026年中国国际服务贸易交易会(以下简称"服贸会")智能原生软件变革与创新交流活动上,升级发布"方升-Code2.0"大模型基准测试体系。

"方升-Code"是中国信通院在工信部指导下研发的代码大模型基准测试体系。本次发布的2.0版,回应了当前AI代码评测体系在工程实践中暴露出的局限性。复旦大学计算与智能创新学院副院长、教授彭鑫指出,当前行业榜单繁荣,但很多评测集的初衷"是AI能力的练兵场,而非软件工程的试金石",且存在评测任务偏简单、数据质量不高、验证标准单一、缺少科学难度分级等问题。

针对上述问题,中国信通院人工智能所平台与工程化部主任曹峰介绍了方升-Code的建设思路。他表示,方升-Code面向能力发现与生产部署需求,核心要求是构念清晰、任务真实、测量稳定和有效性验证,旨在刻画模型能力边界,支撑模型研发与应用部署选型。目前,方升-Code基准测试已构建5000余条高质量、多任务的评测数据,所有数据均来自真实的软件研发项目。本次测试选取代码生成、代码问题解决、单元测试、研发问答四类典型任务,动态选取高、中、低不同难度等级测试数据287条。

彭鑫进一步介绍,方升-Code 2.0从单一正确率转向多维综合测量,评测指标体系包括代码能力表现、工程质量与实际价值、效率成本分析、过程表现衡量、能力稳定性等。未来评测数据集将持续更新,并针对重点测评任务种类的高难度任务进一步开展精细化难度分级,加强被测模型和Agent(智能体)的能力识别区分度。

曹峰指出,评测范式正由"代码能否生成"走向"复杂工程任务能否持续、稳定完成"。大模型能力竞争焦点不是"一套题得分更高",而是能否稳定完成更长、更复杂的真实研发任务。

工信部数据显示,2026年1-5月,我国软件业务收入约6.25万亿元,同比增长10.3%;截至6月,日均Token调用量已突破500万亿。

这一趋势也得到了政策层面的呼应。工业和信息化部近日印发的《"人工智能+软件"专项行动实施方案》提出,到2028年,累计组织实施100项软件企业智能化技改项目,在重点行业打造100个智能体软件标杆应用;到2030年,关键软件全面实现智能化升级,智能编程、智能体软件及智能服务等新业态成为产业新增长极。

中国信通院人工智能研究所平台与工程化部高级业务主管秦思思在分享中指出,智能原生软件正推动软件从"提供功能"向"理解目标、规划任务并自主执行"演进,软件产品的测试也将更加关注智能任务执行与结果质量。

"下一步,中国信通院将携手产业各界,继续构建能够科学反映人工智能在软件行业应用真实情况的评测体系,为我国政策制定和产业落地提供准确参考。"中国信通院人工智能研究所所长魏凯说道。

北京商报记者 魏蔚 实习记者 鲁芹

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
性学家说:男人睡你,是因为心里有你;女人让你睡,因为命里认你

性学家说:男人睡你,是因为心里有你;女人让你睡,因为命里认你

枫红染山径
2026-09-04 05:08:59
每年回婆家都像个免费保姆,今年我执意带老公回娘家过年,车刚启动,公公突然发来一张28道菜的年夜饭菜单

每年回婆家都像个免费保姆,今年我执意带老公回娘家过年,车刚启动,公公突然发来一张28道菜的年夜饭菜单

晓艾故事汇
2026-09-12 09:57:55
日本前首相鸠山由纪夫公开告诫高市,中国当年放弃巨额战争赔款,附带明确的条件,相关内容早已落实在书面文件,不可肆意违背过往承诺

日本前首相鸠山由纪夫公开告诫高市,中国当年放弃巨额战争赔款,附带明确的条件,相关内容早已落实在书面文件,不可肆意违背过往承诺

唠叨说历史
2026-09-02 16:16:45
前阿森纳名宿认为阿森纳边锋萨卡是南郭先生:滥竽充数,侥幸过关,算不上顶级!

前阿森纳名宿认为阿森纳边锋萨卡是南郭先生:滥竽充数,侥幸过关,算不上顶级!

福酱的小时光
2026-09-12 13:39:34
苏州一对情侣,谈了7年,女子提了18次分手,分手后在街头痛哭!

苏州一对情侣,谈了7年,女子提了18次分手,分手后在街头痛哭!

川渝视觉
2026-04-17 22:13:14
脸都不要了!湖南洞口孩子买了50元学平险,结果真得癌了,谁料保险公司翻出国际疾病分类,说编码不对,不符合“恶性肿瘤-重度”条款

脸都不要了!湖南洞口孩子买了50元学平险,结果真得癌了,谁料保险公司翻出国际疾病分类,说编码不对,不符合“恶性肿瘤-重度”条款

火山詩话
2026-09-10 10:40:36
非必要不切肠息肉?医生强调:只要切过息肉,患者要多加关注6点

非必要不切肠息肉?医生强调:只要切过息肉,患者要多加关注6点

叙说医疗健康
2026-09-03 09:00:42
意外发现“饿两天定律”,体重从138斤降到108斤,稳稳瘦下30斤

意外发现“饿两天定律”,体重从138斤降到108斤,稳稳瘦下30斤

解说阿洎
2026-08-19 00:01:42
悲惨!因辅导作业,情绪失控,母女相继跳楼,双双坠亡!

悲惨!因辅导作业,情绪失控,母女相继跳楼,双双坠亡!

闲侃闲侃
2026-06-25 07:43:49
中国各地为啥一夜之间多出这么多零食店,评论区一针见血!

中国各地为啥一夜之间多出这么多零食店,评论区一针见血!

另子维爱读史
2026-09-10 10:54:11
女篮惨败不到24小时,李月汝被曝联手坎贝奇,宫鲁鸣担心的事来了

女篮惨败不到24小时,李月汝被曝联手坎贝奇,宫鲁鸣担心的事来了

江启
2026-09-12 11:05:26
还是来了,为了对抗西方,土耳其竟然提出四国同盟!让中国当老大

还是来了,为了对抗西方,土耳其竟然提出四国同盟!让中国当老大

小莜读史
2026-07-23 19:24:29
魔兽世界:牧师把急速堆到了425%,6秒苦修压缩成1秒,秒杀敌人

魔兽世界:牧师把急速堆到了425%,6秒苦修压缩成1秒,秒杀敌人

小怪吃美食
2026-09-11 18:16:24
许多中年女人,都不喜欢男人亲她的嘴,到底为什么?

许多中年女人,都不喜欢男人亲她的嘴,到底为什么?

风起见你
2026-08-26 12:18:31
骇人听闻!印度非法移民跟踪高种姓美女,停车场追杀后近距离“处决”

骇人听闻!印度非法移民跟踪高种姓美女,停车场追杀后近距离“处决”

大洛杉矶LA
2026-09-12 06:00:26
赢巴林46分!中国男篮收获3大好消息 郭士强乐开了花

赢巴林46分!中国男篮收获3大好消息 郭士强乐开了花

体育哲人
2026-09-12 18:00:26
亚运会男篮比赛:中国男篮大胜巴林,小组赛保持不败

亚运会男篮比赛:中国男篮大胜巴林,小组赛保持不败

界面新闻
2026-09-12 17:50:15
美联储加息预期大幅升温!大盘下周将走向何方?

美联储加息预期大幅升温!大盘下周将走向何方?

春江财富
2026-09-12 10:16:43
红军干部在遵义下馆子,结账时老板当场愣住:你们真给钱?

红军干部在遵义下馆子,结账时老板当场愣住:你们真给钱?

纪史行者
2026-09-12 06:00:09
9月14日至27日,入沪高速公路省际道口将实施交通管制

9月14日至27日,入沪高速公路省际道口将实施交通管制

澎湃新闻
2026-09-12 14:30:26
2026-09-12 18:48:50
北京商报 incentive-icons
北京商报
北京商报社隶属于中共北京市委宣传部,由北京日报报业集团主管主办
293997文章数 300195关注度
往期回顾 全部

科技要闻

苹果折叠屏比小米华为贵5000元,该怎么选

头条要闻

老板称因举报元青花杯失踪被上门检查15次 多部门回应

头条要闻

老板称因举报元青花杯失踪被上门检查15次 多部门回应

体育要闻

老鹰真正的底气来自于什么?

娱乐要闻

港媒曝钟丽淇疑患渐冻症,本人发文

财经要闻

继房子茅台后 中产的第3个"神话"破灭了

汽车要闻

全新配色和新样式轮毂 乐道L80星光设计套装限时惊喜价10080元

态度原创

教育
时尚
手机
本地
军事航空

教育要闻

“国企都十年没招大学生了!”毕业后才发现:原来已经没有岸可以上了

专栏|一位“皮笑肉不笑”初学者的自述

手机要闻

苹果在线商店下线维护 iPhone 18 Pro系列预售即将正式开启

本地新闻

Onestage x 乐华娱乐暑期巡回选拔2026

军事要闻

胡塞武装:9天攻占5400平方公里

无障碍浏览 进入关怀版