国家知识产权局信息显示,朗新科技集团股份有限公司申请一项名为“大模型推理加速方法、装置、设备、存储介质及程序产品”的专利,公开号CN122596041A,申请日期为2026年6月。
专利摘要显示,本发明提供一种大模型推理加速方法、装置、设备、存储介质及程序产品,涉及人工智能技术领域,方法包括:将交互提示词和历史对话输入大语言模型进行自回归解码,获得当前词元;检测当前词元是否为文本操作语义词元;若当前词元是文本操作语义词元,则基于文本操作语义词元,从已有文本信息中复制目标文本段;将多个目标词元更新至输出文本的末尾;基于大语言模型继续进行自回归解码,生成下一个词元,将下一个词元作为当前词元,并返回至检测当前词元是否为文本操作语义词元的步骤,直至大语言模型生成结束符,获得更新后的输出文本。通过上述方式,提高了文本复制效率,优化了大语言模型的推理加速效果,有利于保证复制操作的准确性和稳定性。
天眼查资料显示,朗新科技集团股份有限公司,成立于2003年,位于无锡市,是一家以从事软件和信息技术服务业为主的企业。企业注册资本107823.5821万人民币。通过天眼查大数据分析,朗新科技集团股份有限公司共对外投资了18家企业,参与招投标项目3552次,财产线索方面有商标信息282条,专利信息131条,此外企业还拥有行政许可28个。
声明:市场有风险,投资需谨慎。本文为AI基于第三方数据生成,仅供参考,不构成个人投资建议。
本文源自:市场资讯
作者:情报员
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.