金融界2025年3月25日消息,国家知识产权局信息显示,杭州微宏科技有限公司申请一项名为“基于动态稀疏化的大模型增量训练方法及系统”的专利,公开号CN 119669714 A,申请日期为2025年2月。
专利摘要显示,本发明属于模型训练技术领域,具体涉及基于动态稀疏化的大模型增量训练方法及系统。方法包括:S1,采用多维度的评估方法,对大模型的参数重要性进行评估,反映参数对大模型性能的贡献;S2,采用自适应的结构调整方法,对大模型结构进行动态稀疏化控制;S3,通过构建容量可调的经验回放缓冲池以及提出多目标损失函数,对大模型进行增量训练管理;S4,采用混合精度量化策略,对大模型进行模型压缩优化。本发明具有能够通过实时评估模型参数的重要性,动态调整网络结构,从而在保证模型性能的同时实现高效训练的特点。
天眼查资料显示,杭州微宏科技有限公司,成立于2012年,位于杭州市,是一家以从事科技推广和应用服务业为主的企业。企业注册资本1946.7968万人民币,实缴资本656.7968万人民币。通过天眼查大数据分析,杭州微宏科技有限公司共对外投资了4家企业,参与招投标项目366次,财产线索方面有商标信息6条,专利信息7条,此外企业还拥有行政许可5个。
本文源自:金融界
作者:情报员
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.