金融界2025年6月20日消息,国家知识产权局信息显示,浪潮云信息技术股份公司申请一项名为“一种文本数据并行语义去重方法、系统、设备及介质”的专利,公开号CN120179756A,申请日期为2025年02月。
专利摘要显示,本发明提供了一种文本数据并行语义去重方法、系统、设备及介质,属于文本处理技术领域。所述方法包括:采集待去重的大规模文本数据,进行预处理后生成样本数据,并使用BERT词表进行分词和词频统计,计算出每条样本数据的词频向量;使用预训练的BERT模型提取样本数据的语义特征,根据词频向量计算出样本数据中词语的词语语义权重,并基于语义特征和simhash算法计算样本数据的相似度;根据样本数据的语义相似度,维护预删除字典和全局去重图,并基于全局去重图执行样本数据的删除操作,形成去重后的数据集。
天眼查资料显示,浪潮云信息技术股份公司,成立于2015年,位于济南市,是一家以从事软件和信息技术服务业为主的企业。企业注册资本36214.8272万人民币。通过天眼查大数据分析,浪潮云信息技术股份公司共对外投资了90家企业,参与招投标项目2579次,财产线索方面有商标信息22条,专利信息3648条,此外企业还拥有行政许可11个。
本文源自:金融界
作者:情报员
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.