国家知识产权局信息显示,腾讯科技(深圳)有限公司申请一项名为“模型处理方法、装置、设备及存储介质”的专利,公开号CN121598999A,申请日期为2024年8月。
专利摘要显示,本申请提供一种模型处理方法、装置、设备及存储介质,可应用于模型编辑、间接宾语识别等场景。该方法包括:将训练数据输入第一模型中,对于第一模型所包括的N个注意力层中的每一个注意力层,基于该注意力层所包括的注意力头分别对应的扰动权重,对注意力头进行扰动,得到扰动后的第一模型的输出结果;基于该输出结果和训练数据的标签,确定扰动后的第一模型的模型损失,并基于模型损失,对每一个注意力头分别对应的扰动权重进行训练调整,得到每一个注意力头分别对应的目标扰动权重;基于目标扰动权重,从第一模型所包括的注意力头中选出满足预设要求的关键注意力头。实现对关键注意力头的准确识别。
天眼查资料显示,腾讯科技(深圳)有限公司,成立于2000年,位于深圳市,是一家以从事软件和信息技术服务业为主的企业。企业注册资本200万美元。通过天眼查大数据分析,腾讯科技(深圳)有限公司共对外投资了15家企业,参与招投标项目285次,财产线索方面有商标信息5000条,专利信息5000条,此外企业还拥有行政许可574个。
声明:市场有风险,投资需谨慎。本文为AI基于第三方数据生成,仅供参考,不构成个人投资建议。
本文源自:市场资讯
作者:情报员
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.