国家知识产权局信息显示,神笔马良人工智能(杭州)有限公司申请一项名为“一种轻量化大模型的推理加速方法及系统”的专利,公开号CN121998084A,申请日期为2026年1月。
专利摘要显示,本申请公开了一种轻量化大模型的推理加速方法及系统,包括以下步骤:S1:进行复域增强型的超低比特量化,包括实数参数的复域表征转换、任务感知的动态比特分配以及复域量化与精度校准;S2:构建包括资源层、调度层、应用层的三层架构,输入所述S13的量化后实数权重参数、用户推理请求及硬件状态信息,通过三层协同调度完成预填充与解码阶段任务执行,进行基于PD分离的异构协同推理,输出推理结果及任务执行状态。属于人工智能技术领域,通过复域表征转换与动态比特分配结合精度校准,实现超低比特量化下的高精度保持,有效降低大模型显存占用,解决低比特量化精度损失过大的技术痛点,突破传统实数域量化局限。
天眼查资料显示,神笔马良人工智能(杭州)有限公司,成立于2025年,位于杭州市,是一家以从事软件和信息技术服务业为主的企业。企业注册资本100万人民币。通过天眼查大数据分析,神笔马良人工智能(杭州)有限公司财产线索方面有商标信息1条,专利信息1条。
声明:市场有风险,投资需谨慎。本文为AI基于第三方数据生成,仅供参考,不构成个人投资建议。
本文源自:市场资讯
作者:情报员
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.