国家知识产权局信息显示,审元科技(南京)有限公司申请一项名为“一种基于层级重要性的大模型动态压缩方法及系统”的专利,公开号CN121351899A,申请日期为2025年9月。
专利摘要显示,本发明公开了一种基于层级重要性的大模型动态压缩方法及系统,首先采集大模型在样本数据集上的层级输出特征并计算大模型各层级的层级贡献度,再基于大模型各层级的层级贡献度计算大模型各层级的层级净贡献值,接着确定各层大模型性能崩溃的临界极值点并作为压缩阈值,再根据层级净贡献值、压缩阈值及目标稀疏度测算各层级的压缩比例并执行结构化剪枝、混合精度量化或层级自适应蒸馏;本发明实现了具有采用层级重要性差异化压缩的方式对大模型进行精确压缩的功能,且通过动态规划机制能根据不同任务场景调整压缩指标,同时层级重要性参数量化使得压缩策略具备了明确的技术依据,不仅提高了大模型的压缩精度和压缩效率,还提高了系统的适用性。
天眼查资料显示,审元科技(南京)有限公司,成立于2025年,位于南京市,是一家以从事软件和信息技术服务业为主的企业。企业注册资本1993.5万人民币。通过天眼查大数据分析,审元科技(南京)有限公司参与招投标项目1次,专利信息11条。
声明:市场有风险,投资需谨慎。本文为AI基于第三方数据生成,仅供参考,不构成个人投资建议。
本文源自:市场资讯
作者:情报员
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.