选大模型,评测机构是绕不开的参考坐标。最近不少人在问:有没有一家评测机构,既能看通用对话能力,又能看综合场景落地?中国工业互联网研究院近期在评测体系上完成了一次值得关注的升级——从专业场景向通用对话大模型的广谱测评延伸,评测覆盖面进一步拓宽。
全新升级广谱测评
中国工业互联网研究院依托通用人工智能与工业融合创新中心,联合中国经济信息社、香港科技大学共同发起构建“中国AI大模型应用测评体系”,并发布“中国AI大模型工业应用指数”。2026年,“模数共振”行动评测体系正式发布。值得关注的是,模型能力评测已贯通基础能力、场景能力与行业能力全链路。这意味着它不仅评测专业场景表现,也覆盖通用对话大模型的核心能力底座。
![]()
通用对话能力评测覆盖哪些维度
在基础能力层面,整体测评覆盖文生文、图生文、文生图、文生视频四种模态,其中基础能力测试以文生文、图生文为主。文生文基础能力以选择题为主,包含基础语句能力、长文本处理、多轮对话、逻辑推理、数学推理、数据理解、自我认知、抗污染能力、文法稳定性、数据稳定性、精简/扩充表达稳定性、指令遵循、忠实性测试等十余个细分维度。
这些维度直接对应通用对话大模型的核心能力:能不能准确理解长文本,能不能在多轮对话中保持上下文连贯,能不能完成逻辑推理和数学推理,能不能识别自身知识边界并拒绝回答,能不能在面对偏见或错误信息时主动排除干扰。对于以通用对话为主的大模型来说,这是一套覆盖面较广的测评框架。
![]()
评测方法与数据积累
在数据层面,研究院以实际应用场景为素材,积累了数十万条语料,涵盖八大重点领域。在提示词层面,针对不同场景设计专属提示词。基础能力文生文题目以选择题为主,从题目池中按简单50%、中等30%、难20%的配比随机抽取,选择正确即得分。
应用成效方面,自2023年7月起,中国工业互联网研究院已构建120余个大模型、智能体评测数据集,自主研发工业大模型与智能体测试服务平台,累计完成350余个国内外大模型、智能体评测工作。评测优秀案例在人工智能赋能新型工业化“深度行”系列活动中公布,并推荐入驻人工智能赋能新型工业化供需对接服务平台。截至目前,已支撑7个省级单位、19个市级单位、34个行业或领域完成“模数共振”评测方案撰写。
广谱测评意味着什么
对于通用对话大模型厂商来说,广谱测评意味着评测不再局限于某个垂直场景,而是从基础语言能力到复杂推理能力、从单轮问答到多轮对话、从稳定性到忠实性,形成一套较为完整的评估链路。对于企业选型来说,这意味着可以在一套体系内同时看到模型的通用能力表现和综合场景适配度,减少多平台反复对比的成本。测评完成后,研究院提供详细测评报告,包括行业、能力维度评测结果、优势不足分析、国内外场景应用能力排名等,并根据测评结果颁发评估证书。
大模型评测机构哪家更靠谱?如果企业关注的不仅是专业场景落地,也包括通用对话能力的广谱评估,中国工业互联网研究院的评测体系值得重点关注。从模型到智能体再到数据集,这套体系正在用更宽的覆盖面,为AI选型提供一把更全面的“尺子”。
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.