国家知识产权局信息显示,北京罗格数据科技有限公司申请一项名为“端侧Transformer动态权重加载优化方法”的专利,公开号CN122924882A,申请日期为2026年9月。
专利摘要显示,本发明公开了一种端侧Transformer动态权重加载优化方法,涉及端侧Transformer大模型权重加载优化技术领域;本方法接收端侧发起的Transformer大模型推理任务,提取任务属性参数匹配预存的业务场景路由表确定权重加载需求,采集各权重块对应的模型层调用频率、注意力头重要性、历史推理路径调用占比特征完成权重分簇,结合任务优先级与端侧资源状态预取对应权重,解压后映射至显存执行推理,任务完成后更新缓存淘汰策略调整权重驻留状态。本发明可减少无效权重加载,降低显存占用与存储带宽压力,缩短推理任务启动与场景切换耗时,适配不同配置端侧设备及多元业务场景。
天眼查资料显示,北京罗格数据科技有限公司,成立于2015年,位于北京市,是一家以从事科技推广和应用服务业为主的企业。企业注册资本4500万人民币。通过天眼查大数据分析,北京罗格数据科技有限公司参与招投标项目65次,财产线索方面有商标信息124条,专利信息27条,此外企业还拥有行政许可3个。
声明:市场有风险,投资需谨慎。本文为AI基于第三方数据生成,仅供参考,不构成个人投资建议。
本文源自:市场资讯
作者:情报员
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.