国家知识产权局信息显示,麒麟软件有限公司申请一项名为“GPTQ-4Bit对称量化权重的快速反量化方法、设备、存储介质及产品”的专利,公开号CN121411846A,申请日期为2025年12月。
专利摘要显示,本发明涉及GPTQ‑4Bit对称量化权重的快速反量化方法、设备、存储介质及产品,所述方法基于权重分块qW_block以及权重分块 qW_block 对应的量化缩放因子分块Scale_block,对权重分块qW_block中每个元素w进行快速反量化。本发明充分的利用了GPTQ‑4Bit对称量化的特性,同时利用了AMD GPU的硬件指令和FP16数据类型的特性,来实现GPTQ‑4Bit对称量化权重的快速反量化。该快速反量化方法集成在麒麟优化的推理引擎vLLM中,并用于高效的支撑GPTQ‑4Bit对称量化模型的推理。在典型推理场景下,相比硬件厂商性能提升30%‑300%。
天眼查资料显示,麒麟软件有限公司,成立于2014年,位于天津市,是一家以从事软件和信息技术服务业为主的企业。企业注册资本30195.3834万人民币。通过天眼查大数据分析,麒麟软件有限公司共对外投资了23家企业,参与招投标项目2183次,财产线索方面有商标信息464条,专利信息1013条,此外企业还拥有行政许可1个。
声明:市场有风险,投资需谨慎。本文为AI基于第三方数据生成,仅供参考,不构成个人投资建议。
本文源自:市场资讯
作者:情报员
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.