[发明专利]商品识别方法、装置、智能货柜和可读存储介质

说明书

本发明实施例公开了商品识别方法、装置、智能货柜和可读存储介质，该方法包括：通过商品检测模型依次检测视频流中的视频帧；若在视频帧中检测到商品，并且所述商品未被标记，则利用商品分类模型对所述商品进行分类识别，并对所述商品进行标记；跟踪各个视频帧中的标记商品，本技术方案对已经标记的商品进行跟踪，减少了对商品分类识别的次数，从而避免浪费过多的时间对同一商品进行分类识别，有效减少了整个商品的识别过程的时间。

技术领域

本发明涉及智能货柜领域，尤其涉及一种商品识别方法、装置、智能货柜和可读存储介质。

背景技术

智能货柜提供了新型的商品零售模式，给人们带来了一种新型的购物方式，受到越来越多的欢迎，因而智能货柜的应用也越来越广泛。相比较于传统的购物柜来说，智能货柜具备各种传感器，可以给为用户提供完全不同于以往的购物体验。

现有的一部分智能货柜采用RFID系统，即为每个柜内商品配备RFID标签，采用RFID技术识别柜内商品。但是这种RFID货柜会由于RFID标签的问题而出现商品识别不准确的问题，因而容易出现购物订单错误的情况；另一部分智能货柜基于图像识别和重量传感器，利用商品分类模型实时检测商品重量变化时刻之前和之后的各个图像以识别商品的类别，但是该方法对于每一帧视频图像都需要分类模型进行识别，才能确保商品识别的准确性，识别次数多导致商品识别速度慢。

发明内容

鉴于上述问题，本发明提出一种商品识别方法、装置、智能货柜和可读存储介质。

本发明的一个实施例提出一种商品识别方法，该方法包括：

通过商品检测模型依次检测视频流中的视频帧；

若在视频帧中检测到商品，并且所述商品未被标记，则利用商品分类模型对所述商品进行分类识别，并对所述商品进行标记；

跟踪各个视频帧中的标记商品。

上述的商品识别方法，还包括：

若在后续预设的第一帧数内，未检测到所述商品，则删除所述商品的标记，继续通过商品检测模型依次检测视频流中的视频帧。

上述的商品识别方法，所述跟踪各个视频帧中的商品，包括：

获取所述标记商品的中心坐标；

根据所述中心坐标记录所述商品的移动轨迹。

上述的商品识别方法，利用商品分类模型对所述商品进行分类识别，并对所述商品进行标记，包括：

当在第n帧检测到商品时，若所述商品未被标记，利用商品分类模型对第n帧至第n+m帧的商品进行分类识别，m为预设的识别帧数；

若第n帧至第n+m帧的商品的识别结果相同，则对所述商品进行标记。

上述的商品识别方法，还包括：

当所述商品的中心坐标与预设的虚拟标定线的距离小于等于预设距离阈值时，记录后续预设的第二帧数个视频帧中的商品的中心坐标；

根据所述中心坐标的变化趋势确定所述商品是取出还是放回。

本发明的另一个实施例提出一种商品识别装置，该装置包括：

检测模块，用于通过商品检测模型依次检测视频流中的视频帧；

标记模块，用于若在视频帧中检测到商品，并且所述商品未被标记，则利用商品分类模型对所述商品进行分类识别，并对所述商品进行标记；

跟踪模块，用于跟踪各个视频帧中的标记商品。

上述的商品识别装置，还包括：