国家知识产权局信息显示,摩尔线程智能科技(杭州)有限责任公司申请一项名为“大模型微调方法、装置、设备、存储介质及程序产品”的专利,公开号CN121031818A,申请日期为2025年8月。
专利摘要显示,本公开实施例公开了一种大模型微调方法、装置、设备、存储介质及程序产品,其中,所述大模型微调方法包括:基于低秩适应LoRA模型与大模型在不同轮次的微调变化量,确定目标损失函数;基于所述目标损失函数和训练数据对嵌入有所述LoRA模型的大模型进行微调训练;所述大模型的权重在每次所述微调训练的过程中均基于所述LoRA模型的低秩矩阵的微调变化量进行调整。如此,不需要计算大模型权重的梯度,能够节省显存资源,并在节省显存的基础上,最大程度地提高微调速率和性能。
天眼查资料显示,摩尔线程智能科技(杭州)有限责任公司,成立于2025年,位于杭州市,是一家以从事计算机、通信和其他电子设备制造业为主的企业。企业注册资本2000万人民币。通过天眼查大数据分析,摩尔线程智能科技(杭州)有限责任公司专利信息1条。
声明:市场有风险,投资需谨慎。本文为AI基于第三方数据生成,仅供参考,不构成个人投资建议。
本文源自:市场资讯
作者:情报员
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.