国家知识产权局信息显示,深圳市富临赢电子科技有限公司申请一项名为“一种显卡资源负载均衡的控制方法及系统”的专利,公开号CN121364949A,申请日期为2025年10月。
专利摘要显示,本发明涉及显卡资源调度技术领域,公开了一种显卡资源负载均衡的控制方法及系统。其中,方法包括:构建包含实际GPU显存占用与利用率的样本集;构建GPU显存预测函数与GPU利用率预测函数;通过软约束匹配机制判定当前任务可调度性;执行任务的GPU目标分配;采用多级KV缓存分块回收机制进行动态调度。相较于现有技术中仅采用静态配置或单一指标进行GPU负载估算的方式,尤其是在LLM类模型推理阶段Token长度不确定性大和KV缓存动态膨胀明显的场景下,难以实现精确显存资源调度控制的技术问题,由于本申请通过引入基于多变量预测模型与混合优先调度机制,提高了GPU在大语言模型推理任务中的负载稳定性。
天眼查资料显示,深圳市富临赢电子科技有限公司,成立于2021年,位于深圳市,是一家以从事批发业为主的企业。企业注册资本50万人民币。通过天眼查大数据分析,深圳市富临赢电子科技有限公司专利信息2条,此外企业还拥有行政许可2个。
声明:市场有风险,投资需谨慎。本文为AI基于第三方数据生成,仅供参考,不构成个人投资建议。
本文源自:市场资讯
作者:情报员
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.