北京
国家知识产权局信息显示，北京矩量无限科技有限公司申请一项名为“一种基于大语言模型对话上下文信息下降到推理方法”的专利，公开号CN121257714A，申请日期为2025年9月。
专利摘要显示，本发明公开了一种基于大语言模型对话上下文信息下降到推理方法，所述下降到推理方法包括：增加推理接口能力以支持基于部分上下文推理；在推理引擎中引入可植入的SPI；若在推理时发现有植入SPI，则在推理成功后，将本次推理请求与结果存入缓存，将历史推理过程导出。将对话上下文的缓存操作下移至模型运算和计算引擎的内存层，通过引入推理Session的方法来将调用者的工作简化为传递推理SessionId到推理服务，从而使得推理服务框架有机会将对话从下文缓存适配到内存或快速存储，而不依赖来自应用层的重复上下文传递。基于有状态对话有序性的特点，将网络开销从指数级减低至线性。
天眼查资料显示，北京矩量无限科技有限公司，成立于2020年，位于北京市，是一家以从事科技推广和应用服务业为主的企业。企业注册资本38000万人民币。通过天眼查大数据分析，北京矩量无限科技有限公司共对外投资了1家企业，参与招投标项目2次，专利信息4条，此外企业还拥有行政许可1个。
声明：市场有风险，投资需谨慎。本文为AI基于第三方数据生成，仅供参考，不构成个人投资建议。
本文源自：市场资讯
作者：情报员
特别声明：以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布，本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.
