金融界2025年6月9日消息,国家知识产权局信息显示,科大讯飞股份有限公司申请一项名为“大模型评估方法、装置、设备、系统及程序产品”的专利,公开号CN120106210A,申请日期为2025年01月。
专利摘要显示,本实施例提供了一种大模型评估方法,该方法通过获取通过目标大模型问答所得的对话数据;然后基于问答对话之间的跟随关系依次对问答对话进行指令抽取得到对话指令,并对对话指令进行打分得到第一得分;并提取问答对话对应的答案信息,并将答案信息与前序答案信息进行比对得到第二得分;且对答案信息进行回复质量评价,以得到第三得分;进而结合第一得分、第二得分以及第三得分得到目标得分,以通过目标得分对目标大模型进行评估。从而实现多维度的评估过程,由于针对多轮次对话的特点进行多维度的指标配置,实现了自动化评估,可以大幅降低人工的参与度,减少因个人主观看法造成的偏差,提高大模型评估的准确性。
天眼查资料显示,科大讯飞股份有限公司,成立于1999年,位于合肥市,是一家以从事研究和试验发展为主的企业。企业注册资本231173.4185万人民币。通过天眼查大数据分析,科大讯飞股份有限公司共对外投资了119家企业,参与招投标项目5000次,财产线索方面有商标信息2728条,专利信息5000条,此外企业还拥有行政许可60个。
本文源自:金融界
作者:情报员
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.