[发明专利]物品取放识别方法、装置及设备

说明书

本发明提出了一种物品取放识别方法、装置及设备，其中，方法包括：获取待识别的视频；根据预先训练的识别模型对视频进行识别处理，获取发生变化的视频帧中的变化区域和变化类型；根据变化区域对目标视频帧进行识别，获取物品类型，根据物品类型和变化类型生成物品取放识别结果。由此，解决了相关技术中无法准确处理商品摆放紧凑，商品之间相互遮挡的场景的问题，提高了识别的准确率。

技术领域

本发明涉及计算机视觉技术领域，尤其涉及一种物品取放识别方法、装置及设备。

背景技术

商品取放识别技术是指在无人零售场景例如如无人超市、无人货柜中，通过传感器自动分析货架上的商品变化情况(如一瓶可乐被拿走，一瓶雪碧被放回等)的技术。

相关技术中，通常先检测识别货架商品变化前后两帧图像中所有物品的位置和物品类别，进而统计一定范围区域内两帧图像中物品种类和数量的变化情况。该方案无法准确处理商品摆放紧凑，商品之间相互遮挡的场景，识别准确率有待提高。

发明内容

本发明旨在至少在一定程度上解决相关技术中的技术问题之一。

为此，本发明的第一个目的在于提出一种物品取放识别方法，解决了相关技术中无法准确处理商品摆放紧凑，商品之间相互遮挡的场景的问题，提高了识别的准确率。

本发明的第二个目的在于提出一种物品取放识别装置。

本发明的第三个目的在于提出一种计算机设备。

本发明的第四个目的在于提出一种非临时性计算机可读存储介质。

本发明第一方面实施例提出了一种物品取放识别方法，包括：

获取待识别的视频；

根据预先训练的识别模型对所述视频进行识别处理，获取发生变化的视频帧中的变化区域和变化类型；

根据所述变化区域对目标视频帧进行识别，获取物品类型，根据所述物品类型和所述变化类型生成物品取放识别结果。

本发明实施例的物品取放识别方法，通过获取待识别的视频；根据预先训练的识别模型对视频进行识别处理，获取发生变化的视频帧中的变化区域和变化类型；根据变化区域对目标视频帧进行识别，获取物品类型，根据物品类型和变化类型生成物品取放识别结果。由此，通过识别模型识别出视频中的变化区域和变化类型，进而根据变化区域对目标视频帧进行识别，获取物品类型，解决了相关技术中无法准确处理商品摆放紧凑，商品之间相互遮挡的场景的问题，提高了识别的准确率。此外，相对于追踪用户动作识别类型的方案，避免了因运动导致图像模糊、识别精度低的情况，避免了用户手部遮挡物品影响识别精度的情况，提高了识别精度，并且在保证准确性的同时，无需实时追踪人手并识别商品，降低了计算成本。

另外，根据本发明上述实施例的物品取放识别方法还可以具有如下附加技术特征：

可选地，所述根据预先训练的识别模型对所述视频进行识别处理，获取发生变化的视频帧中的变化区域和变化类型，包括：提取所述视频中的多帧图像的特征，将所述多帧图像的特征进行聚合；对聚合后的特征进行特征变换，根据特征变换结果确定发生变化的视频帧中的变化区域和变化类型。

可选地，在根据预先训练的识别模型对所述视频进行识别处理之前，还包括：获取包含变化区域标记和变化类型标记的图像数据，其中，所述图像数据至少包括变化前后的两帧图像；根据预设的目标函数和所述图像数据训练预设模型的处理参数，生成所述识别模型。