[发明专利]一种基于图像识别技术的购物手推车及其识别方法

权利要求书

1.一种基于图像识别技术的购物手推车，其特征在于：包括有

视觉模块，用于获取购物手推车侧面的货架图像以及购物手推车内部的商品图像；

感知模块，用于检测购物手推车内的商品变化，并在检测到变化时启动视觉模块；

识别模块，用于对货架图像以及商品图像进行识别，获取货架上和购物车中的商品信息；

所述商品信息包括商品、价格标签和促销信息。

2.根据权利要求1所述的一种基于图像识别技术的购物手推车，其特征在于：所述视觉模块还用于获取购物手推车的用户的图像，所述识别模块还用于对上述用户的图像进行识别并获取用户的身份信息。

3.根据权利要求1或2所述的一种基于图像识别技术的购物手推车，其特征在于，所述视觉模块包括有：

锚点检测子模块，用于根据锚点标记训练出的锚点检测模型，对购物手推车侧面的货架图像和购物手推车内部的商品图像进行锚点检测；

图像拼接子模块，用于根据锚点检测子模块检测出的锚点对购物手推车侧面的货架图像和购物手推车内部的商品图像分别进行拼接。

4.根据权利要求1所述的一种基于图像识别技术的购物手推车，其特征在于：所述识别模块采用深度学习模块对输入图像中的商品信息进行识别。

5.根据权利要求1所述的一种基于图像识别技术的购物手推车，其特征在于：还包括有检测分析模块，用于根据识别模块获取的商品信息检测货架陈列状态和/或分析用户购物行为。

6.一种基于图像识别技术购物手推车的识别方法，其特征在于，包括有以下步骤：

感知模块检测购物手推车内的商品变化，并在检测到变化时启动视觉模块；

视觉模块获取购物手推车侧面的货架图像以及购物手推车内部的商品图像；

识别模块对购物手推车侧面的货架图像以及购物手推车内部的商品图像进行识别，获取货架上和购物车中的商品信息；

所述商品信息包括商品、价格标签和促销信息。

7.根据权利要求6所述的一种基于图像识别技术购物手推车的识别方法，其特征在于：视觉模块还获取购物手推车的用户的图像；识别模块还对上述用户的图像进行识别并获取用户的身份信息。

8.根据权利要求6或7所述的一种基于图像识别技术购物手推车的识别方法，其特征在于：所述视觉模块获取购物手推车侧面的货架图像以及购物手推车内部的商品图像这一步骤，具体为：

根据锚点标记训练出的锚点检测模型，对购物手推车侧面的货架图像和购物手推车内部的商品图像进行锚点检测；

根据锚点检测子模块检测出的锚点对购物手推车侧面的货架图像和购物手推车内部的商品图像分别进行拼接，得到拼接后的购物手推车侧面的货架图像和拼接后的购物手推车内部的商品图像。

9.根据权利要求6所述的一种基于图像识别技术购物手推车的识别方法，其特征在于：所述识别模块对购物手推车侧面的货架图像以及购物手推车内部的商品图像进行识别这一步骤，具体为：识别模块采用深度学习模块对输入的购物手推车侧面的货架图像以及购物手推车内部的商品图像中的商品信息进行识别。

10.根据权利要求6所述的一种基于图像识别技术购物手推车的识别方法，其特征在于，还包括有检测分析步骤：根据识别模块获取的商品信息检测货架陈列状态和/或分析用户购物行为。