[发明专利]基于模态间交互的多模态知识图谱实体对齐方法及系统在审
申请号: | 202310699235.3 | 申请日: | 2023-06-13 |
公开(公告)号: | CN116932770A | 公开(公告)日: | 2023-10-24 |
发明(设计)人: | 孙涛;张子豪;张祥;尹新艳 | 申请(专利权)人: | 齐鲁工业大学(山东省科学院) |
主分类号: | G06F16/36 | 分类号: | G06F16/36;G06F16/31;G06F18/22;G06F18/25;G06N3/048;G06N3/09 |
代理公司: | 济南圣达知识产权代理有限公司 37221 | 代理人: | 于凤洋 |
地址: | 250353 山东*** | 国省代码: | 山东;37 |
权利要求书: | 暂无信息 | 说明书: | 暂无信息 |
摘要: | 本公开提供了基于模态间交互的多模态知识图谱实体对齐方法及系统,涉及多模态知识图谱技术领域,包括获取知识图谱中待对齐的不同模态的实体数据;提取实体数据的结构信息特征、视觉信息特征、关系信息特征以及属性信息特征;将获取的各个单模态特征利用低秩多模态融合方法建模模态间的相互作用,再使用跨模态注意力机制使单模态特征并行地向低秩融合模态学习模态间的相互作用,生成实体整体特征表示;利用不同单模态特征和实体整体特征表示进行相似度对比学习,更新实体整体特征表示;通过更新后的实体整体特征表示进行两两相似度计算,选择相似度最高的两个实体进行实体对齐。本公开能够捕获实体多模态信息之间的相互作用。 | ||
搜索关键词: | 基于 模态间 交互 多模态 知识 图谱 实体 对齐 方法 系统 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于齐鲁工业大学(山东省科学院),未经齐鲁工业大学(山东省科学院)许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202310699235.3/,转载请声明来源钻瓜专利网。