国家知识产权局信息显示,惠州市德赛西威汽车电子股份有限公司申请一项名为“异构系统中大语言模型推理的实现方法、装置、设备和介质”的专利,公开号CN122691995A,申请日期为2026年8月。
专利摘要显示,本发明公开了一种异构系统中大语言模型推理的实现方法、装置、设备和介质,其中,异构系统包括CPU、GPU和FPGA,该方法包括:通过GPU执行大语言模型的注意力计算和键值缓存,并在MoE层处执行路由计算,以及执行共享专家多层感知机计算,得到第一执行结果,通过CPU基于路由选择结果和隐藏状态构建路由专家执行请求,并将路由专家执行请求提交至FPGA,通过FPGA根据路由专家执行请求执行被激活的路由专家的多层感知机计算,获得第二执行结果,最后,由GPU将第二执行结果与共享专家输出结果融合后继续执行后续运算。本发明可以通过CPU、GPU和FPGA协同实现大语言模型推理,有效提高了资源利用率。
天眼查资料显示,惠州市德赛西威汽车电子股份有限公司,成立于1986年,位于惠州市,是一家以从事汽车制造业为主的企业。企业注册资本59680.9294万人民币。通过天眼查大数据分析,惠州市德赛西威汽车电子股份有限公司共对外投资了23家企业,参与招投标项目129次,财产线索方面有商标信息133条,专利信息3359条,此外企业还拥有行政许可265个。
声明:市场有风险,投资需谨慎。本文为AI基于第三方数据生成,仅供参考,不构成个人投资建议。
本文源自:市场资讯
作者:情报员
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.