[发明专利]用于为视觉查询的多个区域展示搜索结果的用户接口

说明书

技术领域

所公开的实施例一般地涉及通过用于处理视觉查询的多个并行搜索系统展示搜索结果。

背景技术

基于文本或基于词语的搜索，其中用户将词或短语输入到搜索引擎中并且接收各种结果，是用于进行搜索的有用工具。然而，基于词语的查询要求用户能够输入相关词语。有时，用户可能希望知道关于图像的信息。例如，用户可能想要知道照片中的人的名字，或用户可能想要知道图片中的花或鸟的名称。因此，能够接收视觉查询并且提供搜索结果的系统将是期望的。

发明内容

根据一些实施例，一种处理视觉查询的计算机实现的方法包括：在服务器系统上执行以下步骤，所述服务器系统具有一个或多个处理器和存储一个或多个程序以供该一个或多个处理器执行的存储器。接收来自客户端系统的视觉查询。通过将该视觉查询发送给多个并行搜索系统以供同时处理来对该视觉查询进行处理。多个搜索系统中的每一个实现多个视觉查询搜索过程中的不同视觉查询搜索过程。然后，服务器系统从多个并行搜索系统中的一个或多个接收多个搜索结果。其创建包括视觉查询的相应子部分的一个或多个视觉标识符的交互式结果文档。每一个视觉标识符具有到搜索结果中的至少一个的至少一个用户可选择的链接。最后，服务器系统将该交互式结果文档发送给客户端系统。在一些实施例中，搜索结果包括与视觉查询的对应子部分有关的数据。

在一些实施例中，发送进一步包括：以搜索结果列表形式发送多个搜索结果的子集以与交互式结果文档一起展示。可选地，该方法进一步包括：接收对至少一个用户可选择的链接的用户选择；以及识别搜索结果列表中与所选择的链接相对应的搜索结果。

在一些实施例中，视觉标识符包括围绕视觉查询的相应子部分的一个或多个边界框。边界框可以是正方形或可以勾勒出视觉查询的相应子部分。可选地，一些边界框在其之内包括更小的边界框。

在一些实施例中，边界框中的每一个包括到一个或多个搜索结果的用户可选择的链接，以及用户可选择的链接具有与边界框所环绕的视觉查询的子部分相对应的激活区域。即使在视觉标识符不是边界框的实施例中，相应用户可选择的链接也具有对应于与对应的视觉标识符相关联的视觉查询的子部分的激活区域。

在一些实施例中，当可选择的子部分包含文本时，该方法进一步包括：将可选择的子部分的文本发送给基于文本的查询处理系统。在其他实施例中，当视觉查询的子部分对应于包含文本的相应视觉标识符时，与该相应视觉标识符相对应的搜索结果包括来自对文本中的词语的至少一个的词语查询搜索的结果。

在一些实施例中，当与相应视觉标识符相对应的视觉查询的子部分包含人的脸时，与该相应视觉标识符相对应的搜索结果包括名字、称呼、联系信息、帐户信息、地址信息、与其脸包含在可选择的子部分中的人相关联的相关移动设备的当前位置、其脸包含在可选择的子部分中的人的其他图像和/或该人的脸的潜在图像匹配。

在一些实施例中，当与相应视觉标识符相对应的视觉查询的子部分包含产品时，与该相应视觉标识符相对应的搜索结果包括产品信息、产品评论、发起对产品的购买的选项、发起对产品的出价的选项、类似产品的列表和/或相关产品的列表。

在一些实施例中，对一个或多个视觉标识符中的相应视觉标识符进行格式化，以按照在视觉查询的相应子部分中的所识别的实体的类型、以在视觉上不同的方式展示。可以对相应视觉标识符进行格式化，来以在视觉上不同的方式展示，诸如重叠的颜色、重叠的图案、标签背景颜色、标签背景图案、标签字体颜色以及边界颜色。

在一些实施例中，一个或多个视觉标识符中的相应视觉标识符包括由与视觉查询的相应子部分中的图像相关联的至少一个词语组成的标签。对该标签进行格式化以在交互式结果文档中在该相应子部分上或靠近该相应子部分展示。

附图说明

图1是图示包括视觉查询服务器系统的计算机网络的框图。

图2是图示与一些实施例一致的用于对视觉查询作出响应的过程的流程图。

图3是图示与一些实施例一致的用于用交互式结果文档对视觉查询作出响应的过程的流程图。

图4是图示与一些实施例一致的在客户端和视觉查询服务器系统之间的通信的流程图。

图5是图示与一些实施例一致的客户端系统的框图。

图6是图示与一些实施例一致的前端视觉查询处理服务器系统的框图。

图7是图示与一些实施例一致的利用来处理视觉查询的并行搜索系统中的通用搜索系统的框图。