国家知识产权局信息显示,中国电子科技集团有限公司电子科学研究院申请一项名为“面向工作流的大语言模型键值对缓存策略优化方法及装置”的专利,公开号CN121433855A,申请日期为2025年9月。
专利摘要显示,本申请公开了一种面向工作流的大语言模型键值对缓存策略优化方法及装置。通过合理的工作流设计和提示词模板设计,最大程度提高工作流周期内键值对的可复用率理论值;通过高频键值对筛查复用、基于复用率评估的提示词动态等方法大幅提高推理过程中键值对的实际复用率,降低计算量,缩短推理时间,提高大语言模型的使用效率,提高工作流的整体执行效率。
声明:市场有风险,投资需谨慎。本文为AI基于第三方数据生成,仅供参考,不构成个人投资建议。
本文源自:市场资讯
作者:情报员
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.