[发明专利]监控货架上的物品的方法、计算机和系统

权利要求书

1.一种监控货架上的物品的方法，其特征在于，包括：

获取不同时间拍摄的货架的第一监控图像和第二监控图像；

在获取第一监控图像和第二监控图像之后，对所述第一监控图像和所述第二监控图像进行分类，当分类结果表明所述第一监控图像和所述第二监控图像符合预设要求时，识别所述第一监控图像中的各个物品并识别所述第二监控图像中的各个物品；

对所述第一监控图像和所述第二监控图像的变化进行检测；

根据识别的所述第一监控图像中的各个物品和所述第二监控图像中的各个物品和检测的所述第一监控图像和所述第二监控图像的变化，确定所述货架上的物品的变化情况；

如果识别的所述第一监控图像中第一位置处的物品与所述第二监控图像中第一位置处的物品相同，并且所述第一监控图像中第一位置处的图像和所述第二监控图像中第一位置处的图像有变化，确定所述货架上第一位置处的物品的数量发生变化，包括

获取所述第一监控图像中第一位置处的图像的特征点数量和所述第二监控图像中第一位置处的图像的特征点数量；

如果所述第一监控图像和所述第二监控图像中较早拍摄的监控图像中第一位置处的图像的特征点数量大于较晚拍摄的监控图像中第一位置处的图像的特征点数量，确定所述货架上第一位置处的物品的数量减少；

如果所述第一监控图像和所述第二监控图像中较晚拍摄的监控图像中第一位置处的图像的特征点数量大于较早拍摄的监控图像中第一位置处的图像的特征点数量，确定所述货架上第一位置处的物品的数量增加。

2.根据权利要求1所述的方法，其特征在于，确定所述货架上的物品的变化情况包括：

如果识别的所述第一监控图像中第二位置处的物品与所述第二监控图像中第二位置处的物品不同，确定所述货架上第二位置处的物品的种类发生变化；

或者，如果识别的所述第一监控图像和所述第二监控图像中较早拍摄的监控图像中第三位置处无物品，并且较晚拍摄的监控图像中第三位置处有物品，确定所述货架上第三位置处补充了物品；

或者，如果识别的所述第一监控图像和所述第二监控图像中较早拍摄的监控图像中第四位置处有物品，并且较晚拍摄的监控图像中第四位置处无物品，确定所述货架上第四位置处缺少了物品。

3.根据权利要求2所述的方法，其特征在于，确定所述货架上第一位置处的物品的数量发生变化包括：

获取所述第一监控图像中第一位置处的图像的亮度信息和所述第二监控图像中第一位置处的图像的亮度信息；

如果所述第一监控图像和所述第二监控图像中较早拍摄的监控图像中第一位置处的图像的亮度大于较晚拍摄的监控图像中第一位置处的图像的亮度，确定所述货架上第一位置处的物品的数量减少；

如果所述第一监控图像和所述第二监控图像中较晚拍摄的监控图像中第一位置处的图像的亮度大于较早拍摄的监控图像中第一位置处的图像的亮度，确定所述货架上第一位置处的物品的数量增加。

4.根据权利要求1所述的方法，其特征在于，利用变化检测模型对所述第一监控图像和所述第二监控图像的变化进行检测；

所述变化检测模型包括依次级联的卷积网络和反卷积网络，

所述卷积网络包括依次级联的多个处理模块和中间卷积层，每个处理模块包括依次级联的第一卷积层和池化层；

所述反卷积网络包括依次级联的多个反处理模块，每个反处理模块包括依次级联的反卷积层和第二卷积层，所述第二卷积层配置为对与所述第二卷积层级联的反卷积层的输出和与所述第二卷积层的通道数量相同的第一卷积层所属处理模块的输出的叠加数据进行卷积处理。

5.根据权利要求1所述的方法，其特征在于，识别所述第一监控图像或所述第二监控图像中的各个物品包括：

确定所述第一监控图像或所述第二监控图像中物品的检测框；

比较所述检测框的图像特征与数据库中的各个物品的图像特征；

将与所述检测框的图像特征匹配的数据库中的相应物品确定为所述检测框中的物品。

6.根据权利要求5所述的方法，其特征在于，确定检测框包括：

基于标定的监控图像中的货架的区域和货架的隔板的位置，确定所述第一监控图像或所述第二监控图像中位于货架的隔板上的物品的检测框。