[发明专利]基于图感知的视觉对话答案生成方法及装置在审
| 申请号： | 202210685096.4 | 申请日： | 2022-06-16 |
| 公开（公告）号： | CN115129839A | 公开（公告）日： | 2022-09-30 |
| 发明（设计）人： | 刘安安;徐宁;张国楷;郭俊波;靳国庆;张勇东 | 申请（专利权）人： | 人民网股份有限公司;天津大学 |
| 主分类号： | G06F16/332 | 分类号： | G06F16/332;G06F16/36;G06F16/901;G06K9/62;G06N3/04;G06N3/08 |
| 代理公司： | 天津市北洋有限责任专利代理事务所 12201 | 代理人： | 李林娟 |
| 地址： | 100082 北京市西*** | 国省代码： | 北京;11 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开了一种基于图感知的视觉对话答案生成方法及装置，方法包括：根据各模态性质分别构建查询库，根据查询要素对模态内信息敏感程度不同，利用自注意力机制对特征向量分配权重加和，保留在实际场景中利于推理过程的模态特征；对历史对话进行实体识别和关系检测，以实体作为节点，关系作为有向边构建基础图架构，利用GloVe词向量对实体与关系进行编码；通过迭代更新多次增强图语义，旨在多次将图内信息反馈回对话历史和图像内容中，信息传递过程呈现闭环，用来充分挖掘模态间的交互关系；将迭代多次融合而成的图特征与视觉、文本特征整合后送入解码器，实现多模态信息协同表征，生成针对当前场景所提出问题的答案。装置包括：处理器和存储器。 | ||
| 搜索关键词： | 基于 感知 视觉 对话 答案 生成 方法 装置 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于人民网股份有限公司;天津大学，未经人民网股份有限公司;天津大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202210685096.4/，转载请声明来源钻瓜专利网。
- 上一篇：显示模组及其制备方法、显示装置
- 下一篇：一种煤矿矿石加工用清洗设备
