国家知识产权局信息显示,中国电力科学研究院有限公司申请一项名为“基于动态自约束的电力行业大模型继续预训练方法及系统”的专利,公开号CN121301936A,申请日期为2025年11月。
专利摘要显示,本申请公开了一种基于动态自约束的电力行业大模型继续预训练方法及系统,属于人工智能技术领域,方法包括:获取行业预训练语料与指令训练语料,通过课程式策略动态调整行业预训练语料与指令训练语料的混合比例,得到动态混合数据集;基于所述动态混合数据集配置参考模型,针对所述动态混合数据集中不同类型数据采用差异化损失函数和参考模型,训练目标电力行业大模型;所述差异化损失函数是按分区间优化逻辑计算自适应KL散度,采用自适应KL散度构建损失函数;通过在线推理框架获取所述参考模型的概率,基于所述参考模型的概率使得所述训练连续进行。该方法有效解决专业领域训练中的知识冲突问题,在提升电力领域专业性的同时保持模型的通用性能。
天眼查资料显示,中国电力科学研究院有限公司,成立于2001年,位于北京市,是一家以从事研究和试验发展为主的企业。企业注册资本335200万人民币。通过天眼查大数据分析,中国电力科学研究院有限公司共对外投资了26家企业,参与招投标项目5000次,财产线索方面有商标信息59条,专利信息5000条,此外企业还拥有行政许可185个。
声明:市场有风险,投资需谨慎。本文为AI基于第三方数据生成,仅供参考,不构成个人投资建议。
本文源自:市场资讯
作者:情报员
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.