[发明专利]面向链接预测的交互式多模态融合方法及装置在审
| 申请号： | 202111553153.5 | 申请日： | 2021-12-17 |
| 公开（公告）号： | CN114297402A | 公开（公告）日： | 2022-04-08 |
| 发明（设计）人： | 张勇;李昕航;李超;王霞;盛明 | 申请（专利权）人： | 清华大学 |
| 主分类号： | G06F16/36 | 分类号： | G06F16/36;G06K9/62;G06N3/04;G06N3/08 |
| 代理公司： | 北京路浩知识产权代理有限公司 11002 | 代理人： | 耿向宇 |
| 地址： | 100084 北*** | 国省代码： | 北京;11 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明提供一种面向链接预测的交互式多模态融合方法及装置，方法通过获取待预测知识图谱，包括结构化模态、可视化模态和文本模态；分别提取结构化模态、可视化模态和文本模态的高层次特征信息，得到结构化模态嵌入表示、可视化模态嵌入表示和文本模态嵌入表示；对结构化模态嵌入表示、可视化模态嵌入表示和文本模态嵌入表示进行聚合，通过双线性矩阵计算得到多模态嵌入表示；分别通过各个不同的表示预测目标实体，得到结构化预测结果、可视化预测结果、文本预测结果和多模态预测结果；调整各个预测结果的权重，得到目标预测结果，通过多模态融合能够有效地保留各模态中的专有知识实现互补性链接预测，极大地提高链接预测的准确度。 | ||
| 搜索关键词： | 面向 链接 预测 交互式 多模态 融合 方法 装置 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于清华大学，未经清华大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202111553153.5/，转载请声明来源钻瓜专利网。
- 上一篇：泵车自清洗控制方法、装置及泵车
- 下一篇：作业机械监控系统及作业机械
