国家知识产权局信息显示,深圳市曼德勃罗科技有限公司申请一项名为“大模型训练优化方法、装置、设备及存储介质”的专利,公开号CN121390183A,申请日期为2025年10月。
专利摘要显示,本申请提供了一种大模型训练优化方法、装置、设备及存储介质,该方法包括获取预训练大模型中目标全连接层的神经元参数,得到待优化参数集;根据所述待优化参数集计算神经元权重向量熵,并根据所述神经元权重向量熵构建总损失函数;基于所述总损失函数更新所述待优化参数集,得到更新后的预训练大模型;在所述更新后的预训练大模型满足预设训练终止条件时,生成目标大模型。通过本申请的实施,结合权重向量熵构建总损失函数,在权重向量熵的约束,可引导权重矩阵向一定规律的方向收敛,使梯度方向更集中,有利于减小无效计算,提高训练效率及减少训练成本。
天眼查资料显示,深圳市曼德勃罗科技有限公司,成立于2024年,位于深圳市,是一家以从事软件和信息技术服务业为主的企业。企业注册资本200万人民币。通过天眼查大数据分析,深圳市曼德勃罗科技有限公司专利信息2条,此外企业还拥有行政许可2个。
声明:市场有风险,投资需谨慎。本文为AI基于第三方数据生成,仅供参考,不构成个人投资建议。
本文源自:市场资讯
作者:情报员
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.