[发明专利]自动检测图像中用户所请求的对象

权利要求书

1.一种存储指令的非瞬态计算机可读介质，所述指令在由至少一个处理器执行时，使计算设备：

标识查询，所述查询包括在一个或多个数字图像中待检测的查询对象；

确定所述查询对象是否与已知对象类别相对应；

基于确定所述查询对象与所述已知对象类别相对应，利用已知对象类别检测模型来检测所述一个或多个数字图像内的所述查询对象；

基于确定所述查询对象不与所述已知对象类别相对应，利用概念嵌入模型来检测所述一个或多个数字图像内的所述查询对象；以及

响应于所述查询，提供在所述一个或多个数字图像中所检测的查询对象的指示。

2.根据权利要求1所述的非瞬态计算机可读介质，其中所述指令在由所述至少一个处理器执行时，使所述计算设备通过以下步骤，利用所述已知对象类别检测模型来检测所述一个或多个数字图像内的所述查询对象：

利用区域建议神经网络来检测所述一个或多个数字图像中的潜在对象；以及

生成有关所述潜在对象的近似边界。

3.根据权利要求2所述的非瞬态计算机可读介质，其中所述指令在由所述至少一个处理器执行时，使所述计算设备通过利用对象分类神经网络针对所述潜在对象生成对象标记，利用所述已知对象类别检测模型来检测所述一个或多个数字图像内的所述查询对象。

4.根据权利要求3所述的非瞬态计算机可读介质，其中所述指令在由所述至少一个处理器执行时，使所述计算设备通过确定一个或多个潜在对象的对象标记对应于与所述查询对象相对应的查询对象类别，利用所述已知对象类别检测模型来检测所述一个或多个数字图像内的所述查询对象。

5.根据权利要求4所述的非瞬态计算机可读介质，还包括在由所述至少一个处理器执行时，使所述计算设备执行以下步骤的指令：利用对象掩模模型针对所述查询对象的每个所检测的实例生成对象掩模。

6.根据权利要求3所述的非瞬态计算机可读介质，还包括在由所述至少一个处理器执行时，使所述计算设备执行以下步骤的指令：

确定至少一个潜在对象的对象标记不与所述查询对象相对应；以及

基于所述至少一个潜在对象的所述对象标记不与所述查询对象相对应，滤除所述至少一个潜在对象。

7.根据权利要求1所述的非瞬态计算机可读介质，其中所述指令在由所述至少一个处理器执行时，使所述计算设备通过以下步骤，利用所述概念嵌入模型来检测所述一个或多个数字图像内的所述查询对象：

共同利用区域建议神经网络和概念嵌入神经网络来检测所述一个或多个数字图像中的潜在对象；以及

在所述潜在对象周围生成近似边界。

8.根据权利要求7所述的非瞬态计算机可读介质，其中所述指令在由所述至少一个处理器执行时，使所述计算设备通过以下步骤，利用所述概念嵌入模型来检测所述一个或多个数字图像内的所述查询对象：

利用概念嵌入神经网络，相对于所述查询对象，针对所述潜在对象中的每个潜在对象生成相关性得分；以及

基于所述相关性得分，选择所述多个潜在对象中的至少一个潜在对象作为所述查询对象的实例。

9.根据权利要求8所述的非瞬态计算机可读介质，其中所述指令在由所述至少一个处理器执行时，使所述计算设备通过利用概念嵌入神经网络针对所述潜在对象中的每个潜在对象生成图像嵌入，利用所述概念嵌入模型来检测所述一个或多个数字图像内的所述查询对象。

10.根据权利要求9所述的非瞬态计算机可读介质，其中所述指令在由所述至少一个处理器执行时，使所述计算设备通过利用概念嵌入神经网络针对所述查询对象生成主题嵌入，利用所述概念嵌入模型来检测所述一个或多个数字图像内的所述查询对象。