金融界2025年3月26日消息,国家知识产权局信息显示,智行盒子(河南)科技有限公司申请一项名为“回归式大模型训练方法及装置”的专利,公开号 CN 119670874 A,申请日期为2024年10月。
专利摘要显示,本申请实施例提供一种回归式大模型训练方法及装置,涉及模型训练技术领域,所述方法包括:获取输入数据并将输入数据转为输入特征向量;将输入特征向量输入大模型进行预测,得到预测特征向量;结合预测特征向量跟实际特征向量进行回归损失计算,并根据计算结果对模型进行训练;使用回归任务的思想来训练大模型,去除了token的量化过程,可以避免token量化带来的损失,进而降低大模型的幻觉,节省GPU内存,同时应用场景广泛。
天眼查资料显示,智行盒子(河南)科技有限公司,成立于2013年,位于郑州市,是一家以从事科技推广和应用服务业为主的企业。企业注册资本50603.83万人民币,实缴资本22947.21万人民币。通过天眼查大数据分析,智行盒子(河南)科技有限公司共对外投资了3家企业,财产线索方面有商标信息46条,专利信息154条,此外企业还拥有行政许可2个。
本文源自:金融界
作者:情报员
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.