金融界2025年7月25日消息,国家知识产权局信息显示,哈尔滨工业大学;中国移动通信集团黑龙江有限公司申请一项名为“基于短语匹配组合的跨模态检索方法”的专利,公开号CN120372040A,申请日期为2025年04月。
专利摘要显示,本发明公开了一种基于短语匹配组合的跨模态检索方法,首先,针对每个图像输出一组网格特征来表示该图像,再映射到公共语义空间;随后,使用文本主干网络将单词序列转化为文本表示,再映射到公共语义空间;接着,引入不同层次的GCN堆叠,对不同范围内的非邻域短语进行建模,预测复杂场景下的图文语义相似度;然后,通过组合局部片段匹配、邻域短语匹配和多个非邻域短语匹配,更全面地反映图文语义相似度;最后,采用带有难负样本挖掘的铰链损失监督模型训练。本发明的方法可以很好地进行跨模态检索,在多个数据库上取得了具有竞争力的结果。
本文源自:金融界
作者:情报员
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.