[发明专利]一种基于图像识别技术的购物手推车及其识别方法

说明书

本发明公开了一种基于图像识别技术的购物手推车及其识别方法，包括有：视觉模块，用于获取购物手推车侧面的货架图像以及购物手推车内部的商品图像；感知模块，用于检测购物手推车内的商品变化，并在检测到变化时启动视觉模块；识别模块，用于对货架图像以及商品图像进行识别，获取相应的商品信息。本发明通过视觉模块获取手推车侧面的货架图像以及购物手推车内部的商品图像，同时通过感知模块触发视觉模块，对顾客从货架取出商品放入购物车行为的捕捉，实现对货架的全面实时监测，实现高效率的货架核查要求，利于货架陈列优化。本发明作为一种基于图像识别技术的购物手推车及其识别方法可广泛应用于图像识别领域。

技术领域

本发明涉及图像识别领域，尤其是一种基于图像识别技术的购物手推车及其识别方法。

背景技术

随着新零售概念的兴起，零售行业正面临着剧变。无论是零售商还是品牌商，对于成本效率的控制需求日益提高，如何对货架进行全方位的审计，是企业存在已久的问题；而另外如何最大限度地利用现有技术提升消费者体验，也是零售行业上下游都一直在探索的问题。

零售商想要了解门店内的标准陈列执行情况，进行陈列检查、缺货检查和价签检查，同时也想对购物行为进行跟踪，目前的解决方法如下：

1、门店人员在货架前进行数据统计，即在现场人工统计出相关货架上商品的挂牌价格情况，工作完成后将信息统计汇总并上交，门店顾客线下的购物行为还没办法采集；

2、门店人员通过摄像头拍照采集其图片信息，采集完成后在图片中记录所需统计的商品的核查信息等，工作完成后将信息统计汇总并上交。

然而目前的解决方法中均采用固定摄像头或人力实现采集工作，例如一种基于图像识别技术的货架识别方法(CN107045641A)，对于冷门区域和人流量大的区域，难以采集到高质量图片，工作效率低，难以把控质量。

发明内容

为了解决上述技术问题，本发明的目的是：提供一种基于图像识别技术实现对货架和购物车内部进行商品信息获取，便于自动核查、数据采集和优化陈列的购物手推车。

为了解决上述技术问题，本发明的另一目的是：提供一种基于图像识别购物手推车实现对货架和购物车内部进行商品信息获取，便于自动核查、数据采集和优化陈列的识别方法。

本发明所采用的技术方案是：一种基于图像识别技术的购物手推车，包括有

视觉模块，用于获取购物手推车侧面的货架图像以及购物手推车内部的商品图像；

感知模块，用于检测购物手推车内的商品变化，并在检测到变化时启动视觉模块；

识别模块，用于对货架图像以及商品图像进行识别，获取相应的商品信息。

进一步，所述视觉模块还用于获取购物手推车的用户的图像，所述识别模块还用于对上述用户的图像进行识别并获取用户的身份信息。

进一步，所述视觉模块包括有：

锚点检测子模块，用于根据锚点标记训练出的锚点检测模型，对购物手推车侧面的货架图像和购物手推车内部的商品图像进行锚点检测；

图像拼接子模块，用于根据锚点检测子模块检测出的锚点对购物手推车侧面的货架图像和购物手推车内部的商品图像分别进行拼接。

进一步，所述识别模块采用深度学习模块对输入图像中的商品信息进行识别。

进一步，还包括有检测分析模块，用于根据识别模块获取的商品信息检测货架陈列状态和/或分析用户购物行为。

本发明所采用的另一技术方案是：一种基于图像识别技术购物手推车的识别方法，包括有以下步骤：

感知模块检测购物手推车内的商品变化，并在检测到变化时启动视觉模块；