[发明专利]用于信息交互的方法及装置

说明书

技术领域

本申请涉及数据处理技术领域，具体涉及信息交互技术领域，尤其涉及用于信息交互的方法及装置。

背景技术

识图技术是当前正在高速发展的一项技术，识图技术的一个重要方向是：通过对图像中的内容进行理解并识别，满足用户的认知需求。现有对图像的识别通常是将待识别图像导入图像搜索引擎，以便找到相同或相似的图像，即以图找图。

在人们的日常工作中，并不是每个图像都要进行以图找图操作，是否需要以图找图需要根据实际需要而定。很多情况下，用户在通过文字和图像传达信息时，可能没有直接建立文字和图像之间的对应关系(例如，包含了文字和图像，但没有通过文字对图像进行说明等)，看到文字和图像的用户也可能无法进行相应的信息反馈(例如，用户不知道图像中的内容等)，这就容易出现信息传达错误或不准确的情况，信息交互的效率不高。

发明内容

本申请实施例的目的在于提出了用于信息交互的方法及装置，来解决以上背景技术部分提到的技术问题。

第一方面，本申请实施例提供了一种用于信息交互的方法，该方法包括：接收用户的网页浏览请求，其中，该网页浏览请求包括网址；获取待处理信息，上述待处理信息包括文字信息和图像；提取上述待处理信息的文字信息的特征词，基于上述特征词查找上述待处理信息的图像的描述信息，其中，上述特征词用于表征对上述图像的查找请求，上述描述信息用于表征对上述图像的文字描述；通过上述描述信息构建上述待处理信息的应答信息。

在一些实施例中，上述提取上述待处理信息的文字信息的特征词包括：对文字信息进行语义识别，得到对应上述文字信息的语义信息；从上述语义信息中提取特征词。

在一些实施例中，上述基于上述特征词查找上述待处理信息的图像的描述信息包括：将图像导入图像查找模型，得到与上述图像对应的待匹配图像集合，上述待匹配图像集合包括至少一张待匹配图像，上述图像查找模型用于表征图像与待匹配图像之间的第一对应关系；将待匹配图像导入语义标签模型，得到对应待匹配图像集合的语义标签集合，上述语义标签模型用于表征待匹配图像与语义标签的第二对应关系，语义标签用于对待匹配图像进行文字说明；从上述语义标签集合中筛选出一个待识别语义标签，将待识别语义标签中的与上述图像对应的名词的解释信息作为描述信息。

在一些实施例中，上述从上述语义标签集合中筛选出一个待识别语义标签包括：统计上述语义标签集合中相同的语义标签的数量，将数量最多的语义标签作为待识别语义标签。

在一些实施例中，上述方法还包括：对上述描述信息进行修正的步骤，上述对上述描述信息进行修正的步骤包括：接收对应上述应答信息的反馈信息，上述反馈信息用于评价上述应答信息的准确性；对上述反馈信息进行语义识别，得到准确率信息；在上述准确率信息低于设定阈值时，从上述语义标签集合中除待识别语义标签以外的语义标签中选择二次待识别标签；将二次待识别标签中的与上述图像对应的名词的解释信息作为二次描述信息；通过二次描述信息构建上述待处理信息的应答信息。

第二方面，本申请实施例提供了一种用于信息交互的装置，上述该装置包括：待处理信息获取单元，用于获取待处理信息，上述待处理信息包括文字信息和图像；描述信息获取单元，用于提取上述待处理信息的文字信息的特征词，基于上述特征词查找上述待处理信息的图像的描述信息，其中，上述特征词用于表征对上述图像的查找请求，上述描述信息用于表征对上述图像的文字描述；应答信息构建单元，用于通过上述描述信息构建上述待处理信息的应答信息。

在一些实施例中，上述描述信息获取单元包括：语义识别子单元，用于对文字信息进行语义识别，得到对应上述文字信息的语义信息；特征词提取子单元，用于从上述语义信息中提取特征词。

在一些实施例中，上述描述信息获取单元包括：待匹配图像获取子单元，用于将图像导入图像查找模型，得到与上述图像对应的待匹配图像集合，上述待匹配图像集合包括至少一张待匹配图像，上述图像查找模型用于表征图像与待匹配图像之间的第一对应关系；语义标签获取子单元，用于将待匹配图像导入语义标签模型，得到对应待匹配图像集合的语义标签集合，上述语义标签模型用于表征待匹配图像与语义标签的第二对应关系，语义标签用于对待匹配图像进行文字说明；描述信息获取子单元，用于从上述语义标签集合中筛选出一个待识别语义标签，将待识别语义标签中的与上述图像对应的名词的解释信息作为描述信息。

在一些实施例中，上述描述信息获取子单元包括：统计上述语义标签集合中相同的语义标签的数量，将数量最多的语义标签作为待识别语义标签。