网易首页 > 网易号 > 正文 申请入驻

服贸观澜|方升-Code 2.0发布,大模型基准测试体系迎来新标准

0
分享至

来源:滚动播报

(来源:北京商报)

2026年,AI大模型正从通用对话走向代码生成、智能体协作等产业落地场景,模型代码能力的标准化评估需求也日益凸显。


9月11日下午,中国信息通信研究院(以下简称“中国信通院”)在2026年中国国际服务贸易交易会(以下简称“服贸会”)智能原生软件变革与创新交流活动上,升级发布“方升-Code2.0”大模型基准测试体系。

“方升-Code”是中国信通院在工信部指导下研发的代码大模型基准测试体系。本次发布的2.0版,回应了当前AI代码评测体系在工程实践中暴露出的局限性。复旦大学计算与智能创新学院副院长、教授彭鑫指出,当前行业榜单繁荣,但很多评测集的初衷“是AI能力的练兵场,而非软件工程的试金石”,且存在评测任务偏简单、数据质量不高、验证标准单一、缺少科学难度分级等问题。

针对上述问题,中国信通院人工智能所平台与工程化部主任曹峰介绍了方升-Code的建设思路。他表示,方升-Code面向能力发现与生产部署需求,核心要求是构念清晰、任务真实、测量稳定和有效性验证,旨在刻画模型能力边界,支撑模型研发与应用部署选型。目前,方升-Code基准测试已构建5000余条高质量、多任务的评测数据,所有数据均来自真实的软件研发项目。本次测试选取代码生成、代码问题解决、单元测试、研发问答四类典型任务,动态选取高、中、低不同难度等级测试数据287条。

彭鑫进一步介绍,方升-Code 2.0从单一正确率转向多维综合测量,评测指标体系包括代码能力表现、工程质量与实际价值、效率成本分析、过程表现衡量、能力稳定性等。未来评测数据集将持续更新,并针对重点测评任务种类的高难度任务进一步开展精细化难度分级,加强被测模型和Agent(智能体)的能力识别区分度。

曹峰指出,评测范式正由“代码能否生成”走向“复杂工程任务能否持续、稳定完成”。大模型能力竞争焦点不是“一套题得分更高”,而是能否稳定完成更长、更复杂的真实研发任务。

工信部数据显示,2026年1-5月,我国软件业务收入约6.25万亿元,同比增长10.3%;截至6月,日均Token调用量已突破500万亿。

这一趋势也得到了政策层面的呼应。工业和信息化部近日印发的《“人工智能+软件”专项行动实施方案》提出,到2028年,累计组织实施100项软件企业智能化技改项目,在重点行业打造100个智能体软件标杆应用;到2030年,关键软件全面实现智能化升级,智能编程、智能体软件及智能服务等新业态成为产业新增长极。

中国信通院人工智能研究所平台与工程化部高级业务主管秦思思在分享中指出,智能原生软件正推动软件从“提供功能”向“理解目标、规划任务并自主执行”演进,软件产品的测试也将更加关注智能任务执行与结果质量。

“下一步,中国信通院将携手产业各界,继续构建能够科学反映人工智能在软件行业应用真实情况的评测体系,为我国政策制定和产业落地提供准确参考。”中国信通院人工智能研究所所长魏凯说道。

北京商报记者 魏蔚 实习记者 鲁芹

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
1991年,他一年时间相继杀害41人,尸体全部埋在自家后院地窖

1991年,他一年时间相继杀害41人,尸体全部埋在自家后院地窖

法网恢恢
2026-08-30 22:09:03
印度耕地27亿亩,年产3.7亿吨粮食,我国耕地19.18亿亩,年产多少

印度耕地27亿亩,年产3.7亿吨粮食,我国耕地19.18亿亩,年产多少

抽象派大师
2026-09-17 14:15:46
“诺奖风向标”!中国科学院院士薛其坤获奖

“诺奖风向标”!中国科学院院士薛其坤获奖

化学人生
2026-09-18 22:05:10
地铁车厢,一女子将手插入男子裤内,殊不知,这是博流量的摆拍

地铁车厢,一女子将手插入男子裤内,殊不知,这是博流量的摆拍

四海神君
2026-09-06 15:30:09
《交锋》大结局:郑桂平,用笑掩饰真相,看似笑面虎实则是我方最强卧底!

《交锋》大结局:郑桂平,用笑掩饰真相,看似笑面虎实则是我方最强卧底!

肆季娱乐
2026-09-17 17:57:32
频繁走光副乳外露,为了出圈博眼球,连最基本的体面都不要了?

频繁走光副乳外露,为了出圈博眼球,连最基本的体面都不要了?

可乐谈情感
2026-09-18 08:44:39
美国有点慌了?中国AI仅用5%的GPU,达到了美国AI同等能力

美国有点慌了?中国AI仅用5%的GPU,达到了美国AI同等能力

互联网.乱侃秀
2026-09-17 13:47:17
湖北省和武汉市联合调查组通报长江倾倒淤泥事件

湖北省和武汉市联合调查组通报长江倾倒淤泥事件

新京报
2026-09-18 19:55:11
新西兰华人老板当街脱衣,跪地磕头“求放过”!“几十人的饭碗被砸了!”

新西兰华人老板当街脱衣,跪地磕头“求放过”!“几十人的饭碗被砸了!”

发现新西兰
2026-09-17 13:07:02
邮储前高管受贿案:二审突现留置期间《自绝书》与无罪供述,家属发三千封控告信

邮储前高管受贿案:二审突现留置期间《自绝书》与无罪供述,家属发三千封控告信

法治边角料
2026-09-18 18:05:26
12:2!美国正式加息,特朗普付出惨痛代价,中方拒签新广场协议

12:2!美国正式加息,特朗普付出惨痛代价,中方拒签新广场协议

说故事的阿袭
2026-09-18 10:27:33
中国运动员被困日本机场!干坐6小时又累又饿,日本做法太没品

中国运动员被困日本机场!干坐6小时又累又饿,日本做法太没品

吃青菜长高
2026-09-17 18:09:19
忍无可忍无需再忍!一场恶仗正在逼近中国,东大不必再继续退让了

忍无可忍无需再忍!一场恶仗正在逼近中国,东大不必再继续退让了

温一壶皎月
2026-09-16 15:18:37
女学霸发明“咯噔字体”,老师低分警告:别用个性挑战考试底线

女学霸发明“咯噔字体”,老师低分警告:别用个性挑战考试底线

蝴蝶花雨话教育
2026-05-07 00:05:04
iPhone18Pro今日开售!广州天环广场大排长龙!现场人山人海...

iPhone18Pro今日开售!广州天环广场大排长龙!现场人山人海...

广州笋嘢益街坊
2026-09-18 16:42:04
离队倒计时!克内克特,会被湖人放弃吗?

离队倒计时!克内克特,会被湖人放弃吗?

篮球实录
2026-09-19 02:19:32
河南固始一村民在菜地烧1平米杂草被罚500元?当地通报

河南固始一村民在菜地烧1平米杂草被罚500元?当地通报

界面新闻
2026-09-18 18:31:20
高盛预测2050年GDP:美国37万亿美元,印度22万亿,中国是多少呢

高盛预测2050年GDP:美国37万亿美元,印度22万亿,中国是多少呢

观史搜寻着
2026-09-04 19:27:25
《兰香如故》第15-16集预告:林锦岐对许兰香开始有点暧昧了,李医士出诊发现了异样

《兰香如故》第15-16集预告:林锦岐对许兰香开始有点暧昧了,李医士出诊发现了异样

两年的海
2026-09-16 08:36:05
狱友问我怎么进来的,我:贪10个亿。狱警上来就是一脚:装什么

狱友问我怎么进来的,我:贪10个亿。狱警上来就是一脚:装什么

悬案解密档案
2026-02-26 15:34:48
2026-09-19 03:11:00
新浪财经 incentive-icons
新浪财经
新浪财经是一家创建于1999年8月的财经平台
4820243文章数 9644关注度
往期回顾 全部

科技要闻

直击iPhone 18新机发售:黄牛加价不如前代

头条要闻

俄杜马选举拉夫罗夫"意外"登顶名单 梅德韦杰夫被拿下

头条要闻

俄杜马选举拉夫罗夫"意外"登顶名单 梅德韦杰夫被拿下

体育要闻

好吧,中国男篮辛苦了

娱乐要闻

陈思诚 佟丽娅不想让儿子知道两人离婚

财经要闻

研发0.25亿理财26亿,敷尔佳豪赌三类器械

汽车要闻

纯电/插混双动力+五座/六座双布局 海狮08应该怎么选?

态度原创

游戏
手机
家居
时尚
旅游

《给他爱5》废弃“自由城”DLC可能会加入到《GTA6》中

手机要闻

iPhone 18 Pro Max首发评测:变化藏在内部,影像更Pro了

家居要闻

2026建博会(广州) 公装联探展交流活动

直播|| 私藏几年的小众千元包,这5只越背越香!

旅游要闻

510万元/人、6天行程、681份售出!

无障碍浏览 进入关怀版