[发明专利]多层次注意力机制的多模态标签推荐模型构建方法及装置有效
| 申请号： | 202010152922.X | 申请日： | 2020-03-06 |
| 公开（公告）号： | CN111461174B | 公开（公告）日： | 2023-04-07 |
| 发明（设计）人： | 李展;徐宝胜;王凯凯;田晓杰;赵国英;章勇勤;王珺;李斌;杨溪;彭进业 | 申请（专利权）人： | 西北大学 |
| 主分类号： | G06V10/764 | 分类号： | G06V10/764;G06F18/241;G06V10/774;G06F18/214;G06V10/80;G06F18/25;G06V10/82;G06N3/0464;G06N3/0442;G06N3/08;G06F16/9535;G06F16/958 |
| 代理公司： | 西安恒泰知识产权代理事务所 61216 | 代理人： | 黄小梧 |
| 地址： | 710069 *** | 国省代码： | 陕西;61 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开了一种多层次注意力机制的多模态标签推荐模型构建方法及装置，提取图像的特征对图像特征使用外积，进行双线性融合后再通过一个注意力网络层，获取图像中每个区域的注意力因子，将注意力因子与原始特征进行逐元素乘积，得到最后的图像特征表达；对文本进行词嵌入并使用Bi‑LSTM网络对文本特征提取，然后通过一个注意力网络层与原始特征进行乘积，得到最后的文本信息表达。然后通过一个双线性融合层，将图像和文本特征进行融合，然后将融合后的特征输入到高层次注意力层，得到最后的联合特征表达，最后送入到分类层中，进行标签分类和推荐。在多模态信息处理的条件下，本发明联合层次注意力机制的方法提高了推荐的准确性。 | ||
| 搜索关键词： | 多层次 注意力 机制 多模态 标签 推荐 模型 构建 方法 装置 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于西北大学，未经西北大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202010152922.X/，转载请声明来源钻瓜专利网。
