[发明专利]基于知识感知的模块化视觉推理方法及装置在审
| 申请号： | 201910665101.3 | 申请日： | 2019-07-23 |
| 公开（公告）号： | CN110414684A | 公开（公告）日： | 2019-11-05 |
| 发明（设计）人： | 朱文武;李国豪;王鑫 | 申请（专利权）人： | 清华大学 |
| 主分类号： | G06N5/04 | 分类号： | G06N5/04;G06F16/33;G06F16/58 |
| 代理公司： | 北京清亦华知识产权代理事务所(普通合伙) 11201 | 代理人： | 王艳斌 |
| 地址： | 10008*** | 国省代码： | 北京;11 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开了一种基于知识感知的模块化视觉推理方法及装置，其中，该方法包括：获取图片，并获取图片对应的提问文本；对提问文本进行动态解析生成多个神经网络模块；将多个神经网络模块变换为树状结构神经网络模块，并对树状结构神经网络模块进行实例化处理生成知识感知神经网络模型；对图片进行视觉特征处理得到图片特征，将图片特征输入知识感知神经网络模型，并输出提问文本对应的答案。该方法针对特定的问题来进行动态组装，形成自下而上的树状模块化结构，可用于在真实图片上进行动态的视觉推理。 | ||
| 搜索关键词： | 神经网络模块 感知 推理 神经网络模型 树状结构 图片特征 文本 视觉 模块化 提问 模块化结构 图片 动态解析 动态组装 视觉特征 动态的 实例化 可用 答案 输出 | ||
【主权项】：
1.一种基于知识感知的模块化视觉推理方法，其特征在于，包括以下步骤：获取图片，并获取所述图片对应的提问文本；对所述提问文本进行动态解析生成多个神经网络模块；将所述多个神经网络模块变换为树状结构神经网络模块，并对所述树状结构神经网络模块进行实例化处理生成知识感知神经网络模型；对所述图片进行视觉特征处理得到图片特征，将所述图片特征输入所述知识感知神经网络模型，并输出所述提问文本对应的答案。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于清华大学，未经清华大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201910665101.3/，转载请声明来源钻瓜专利网。
