北京
国家知识产权局信息显示，万物求索（广州）人工智能科技有限公司申请一项名为“一种基于全局状态感知的大模型推理请求调度方法及系统”的专利，公开号CN122340185A，申请日期为2026年5月。
专利摘要显示，本发明公开了一种基于全局状态感知的大模型推理请求调度方法及系统，涉及大语言模型推理系统技术领域。该基于全局状态感知的大模型推理请求调度方法，在单一进程内构建网络与协议层、会话调度层与推理引擎层，通过网络监听线程接收请求并创建会话对象，经双缓冲队列与轮询线程完成入队与超时清理，工作线程基于全局状态感知调度算法认领会话，在同一进程内完成协议解析与令牌编码后提交推理引擎，由推理引擎执行连续批处理调度与KV缓存复用，最后将令牌解码后写回客户端并释放会话资源，本发明通过同进程融合架构与全局状态感知调度算法，使服务层能够实时获取推理引擎内部状态并据此优化调度决策，消除了跨层边界开销与信息不对称问题。
天眼查资料显示，万物求索（广州）人工智能科技有限公司，成立于2025年，位于广州市，是一家以从事软件和信息技术服务业为主的企业。企业注册资本100万人民币。通过天眼查大数据分析，万物求索（广州）人工智能科技有限公司财产线索方面有商标信息3条，专利信息2条。
声明：市场有风险，投资需谨慎。本文为AI基于第三方数据生成，仅供参考，不构成个人投资建议。
本文源自：市场资讯
作者：情报员
特别声明：以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布，本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.
