[发明专利]商品识别方法及装置

说明书

本申请公开了一种商品识别方法及装置，属于互联网技术领域。在本申请中，通过商品识别模型对多张图像中的每张图像进行识别。由于商品识别模型由包含有手部和商品的多张样本图像训练得到，因此，根据该商品识别模型可以检测到图像中包含的手部以及商品。在此基础上，根据商品识别模型得到的图像的检测结果，可以确定出包含有手部和手部所持商品的多张目标图像。这样，根据每张目标图像中手部和手部所持商品的位置信息以及每张目标图像的采集时间来确定商品识别结果，相当于过滤掉了图像中包含的其他干扰信息，只关注手部所持商品的类别，从而减少了对其他无关商品的误识别，提高商品识别准确率。

技术领域

本申请涉及互联网技术领域，特别涉及一种商品识别方法及装置。

背景技术

当前，随着智能化的发展，在商场、学校、写字楼等公共场所中，自动售货柜得以大规模的落地应用。自动售货柜分为封闭式自动售货柜和开放式自动售货柜两种。其中，用户在开放式自动售货柜上购买商品时，可以通过扫码打开柜门选购商品。自动售货柜可以通过柜体上安装的图像采集装置对用户选购商品的过程进行图像采集，并根据采集的图像来识别用户选购的商品，进而在用户关闭柜门之后，对识别出的用户选购的商品进行结算。然而，由于图像采集装置在用户选购商品的过程中采集到的图像存在较多的干扰信息，因此，容易造成商品误识别，基于此，亟需提供一种商品识别方法，以提高商品识别的准确度。

发明内容

本申请实施例提供了一种商品识别方法、装置及存储介质，可以降低商品误识别概率，提高商品识别准确率。所述技术方案如下：

一方面，提供了一种商品识别方法，所述方法包括：

获取在用户选购商品的过程中采集到的多张图像；

通过商品识别模型对所述多张图像中的每张图像进行识别，得到每张图像的检测结果，所述商品识别模型由包含有手部和商品的多张样本图像训练得到；

根据每张图像的检测结果，从所述多张图像中确定包含有手部和手部所持商品的多张目标图像；

根据每张目标图像中手部和手部所持商品的位置信息以及每张目标图像的采集时间，确定商品识别结果。

可选地，所述通过商品识别模型对所述多张图像中的每张图像进行识别之前，还包括：

获取多张测试图像和每张测试图像的标注信息，以及获取所述多张样本图像和每张样本图像的标注信息，所述标注信息用于指示相应图像中手部的位置和商品的位置；

根据所述多张样本图像和每张样本图像的标注信息，对所述初始网络进行训练，得到基础识别模型；

根据所述多张测试图像和每张测试图像的标注信息，确定所述基础识别模型的检测精度；

如果所述检测精度未达到参考精度值，则对所述多张样本图像进行更新，返回获取所述多张样本图像和每张样本图像的标注信息的步骤，直到所述检测精度达到所述参考精度值时，将最后一次得到的基础识别模型作为所述商品识别模型。

可选地，所述初始网络包括特征提取网络和目标检测网络；

所述根据所述多张样本图像和每张样本图像的标注信息，对所述初始网络进行训练，得到基础识别模型，包括：

通过所述特征提取网络对第一样本图像进行特征提取，得到所述第一样本图像的特征矩阵，所述第一样本图像为所述多张样本图像中的任一样本图像；

通过所述目标检测网络对所述特征矩阵进行处理，得到所述第一样本图像的样本检测结果；

根据所述第一样本图像的标注信息和样本检测结果，确定损失函数值；