[发明专利]一种多模态知识库的构建方法、装置及计算机可读介质有效
| 申请号： | 201910931395.X | 申请日： | 2019-09-29 |
| 公开（公告）号： | CN110704637B | 公开（公告）日： | 2023-05-12 |
| 发明（设计）人： | 王东升;范红杰;林凤绿;柳泽明 | 申请（专利权）人： | 出门问问信息科技有限公司 |
| 主分类号： | G06F16/36 | 分类号： | G06F16/36;G06F16/51 |
| 代理公司： | 北京乐知新创知识产权代理事务所(普通合伙) 11734 | 代理人： | 江宇 |
| 地址： | 100044 北京市海淀区*** | 国省代码： | 北京;11 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开了一种多模态知识库的构建方法、装置及计算机可读介质，包括：接收训练数据；提取所接收的训练数据中所有的实体，得到实体集；针对所得到的实体集中的每一个实体，获取对应于每一个实体的图片；将实体集中的每一个实体和对应于实体的图片作为联合模型的输入进行训练，得到对应于实体且相互映射的词向量和图片向量；根据所得到的图片向量，生成用于将图片向量映射于图片的图片索引。查询时，知识库根据查询信息反馈文本信息，从文本信息中提取实体，根据实体得到词向量，词向量通过映射关系查询图片向量，图片向量通过图片索引找到对应的图片，反馈该图片。本知识库在查询时既能反馈文本信息，还能反馈图片信息，使得查询结果全面。 | ||
| 搜索关键词： | 一种 多模态 知识库 构建 方法 装置 计算机 可读 介质 | ||
【主权项】：
1.一种多模态知识库的构建方法，其特征在于，所述方法包括：/n接收训练数据；/n提取所接收的训练数据中所有的实体，得到实体集；/n针对所得到的实体集中的每一个实体，获取对应于每一个实体的图片；/n将所述实体集中的每一个实体和对应于所述实体的图片作为联合模型的输入进行训练，得到对应于所述实体且相互映射的词向量和图片向量；/n根据所得到的图片向量，生成用于将所述图片向量映射于所述图片的图片索引。/n
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于出门问问信息科技有限公司，未经出门问问信息科技有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201910931395.X/，转载请声明来源钻瓜专利网。
