金融界2025年5月14日消息,国家知识产权局信息显示,上海曲速超为技术有限公司申请一项名为“一种大语言模型低比特权重和激活值的动态量化方法、系统及应用”的专利,公开号CN119993134A,申请日期为2024年6月。
专利摘要显示,本发明公开了一种大语言模型低比特权重和激活值的动态量化方法,所述动态量化方法包括如下步骤:步骤一、根据权重和激活值的不同分布特性选择量化数据类型,权重采用4比特正态浮点量化,激活值采用8比特动态树量化;步骤二、对4比特权重和8比特激活值生成量化目标编码,通过计算分位点和/或指数位长度,得到量化目标编码。在量化过程中还可以通过对待量化数据进行分块,并进行量化和/或反量化处理,对量化精度进行提升。本发明还公开了实现上述动态量化方法的动态量化系统,以及所述动态量化方法或系统的应用,具有广泛应用价值。
天眼查资料显示,上海曲速超为技术有限公司,成立于2023年,位于上海市,是一家以从事科技推广和应用服务业为主的企业。企业注册资本1000万人民币。通过天眼查大数据分析,上海曲速超为技术有限公司财产线索方面有商标信息1条,专利信息21条。
本文源自:金融界
作者:情报员
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.