国家知识产权局信息显示,北京航空航天大学、中国建筑设计研究院有限公司、中国视障文化资讯服务中心(中国盲文图书馆)申请一项名为“一种基于文本特征基准的视听触多模态感知方法及系统”的专利,公开号CN122758255A,申请日期为2026年5月。
专利摘要显示,本申请公开了一种基于文本特征基准的视听触多模态感知方法及系统,该方法包括:通过以预训练的文本编码器所定义的统一语义空间为基准,将触觉编码器基于触觉‑文本对比学习训练至该空间,并利用预训练视觉编码器和预训练音频编码器在各自预训练过程中已与该文本空间对齐的特性,实现触觉嵌入特征与视觉嵌入特征、音频嵌入特征在同一语义空间中的间接对齐,从而在无需大规模三模态配对数据的情况下,完成触觉、视觉、音频三种模态的统一语义表示。并且,基于上述统一语义空间,触觉嵌入特征与视觉嵌入特征、音频嵌入特征处于可比的向量空间之中,能够直接进行相似度计算与语义关联,执行各类需要触觉模态参与的跨模态感知任务。
声明:市场有风险,投资需谨慎。本文为AI基于第三方数据生成,仅供参考,不构成个人投资建议。
本文源自:市场资讯
作者:情报员
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.