[发明专利]一种冰柜陈列检测方法、系统及电子设备

说明书

本发明涉及零售业管理技术领域，特别涉及一种冰柜陈列检测方法、系统及电子设备，包括如下步骤：提供待测图像，待测图像包括背景区域和冰柜区域；利用图像语义分割模型对待测图像中所有像素点进行分类，并分别输出对应像素点的分类信息和位置信息；利用位置信息和/或分类信息将待测图像中的冰柜区域与背景区域进行分离以获得冰柜图像；通过单应性变换算法将冰柜图像进行矫正以获得矫正图像；及基于所述矫正图像中的所有像素的位置信息和分类信息获得所述冰柜中的内容和所述冰柜的层数，并结合预存的样品模板进行比较，进而判定所述冰柜是否陈列合规，基于矫正图像判定所述冰柜的陈列内容是否合规能很好的提高分析准确性，避免出现不必要的偏差且节省人力和财力。

【技术领域】

本发明涉及零售业管理技术领域，特别涉及一种冰柜陈列检测方法、系统及电子设备。

【背景技术】

随着经济的发展以及互联网的普及，很多零售业通过加盟合伙的方式进行运营，或者在不同的区域规划多个分销点，由管控中心按照设定的标准统一管理。为了方便管理，比如现有的冰柜或者无人货柜中，通常要求每个合伙加盟商按照集团规定的标准陈列商品，比如冰柜中每一层应该放什么东西，每一种物品之间的排列顺序等都是有设定的规则的。一旦出现不是按照规定排列时，需要通知商户进行调整。现有的检查冰柜的方式通常是利用摄像设备对冰柜进行拍摄以获得图像，对图像进行分析以判定所述冰柜的陈列方式是否合规，常常在拍摄过程中，由于拍摄角度难以控制，拍摄出来的图像容易出现倾斜，导致不能完全清楚的显示冰柜中的内容，导致分析结果可靠性低。

【发明内容】

为克服目前的冰柜陈列检测方法存在的可靠性低的技术问题，本发明提供一种冰柜陈列检测方法、系统及电子设备。

为了解决上述技术问题提供一种冰柜陈列检测方法，用于对冰柜中陈列的商品进行分析以判定所述冰柜的陈列方式是否合规，包括如下步骤：步骤S1、提供待测图像，所述待测图像包括背景区域和冰柜区域；步骤S2、利用图像语义分割模型对所述待测图像中所有像素点进行分类，并分别输出对应像素点的分类信息和位置信息；步骤S3、利用所述位置信息和/或分类信息将所述待测图像中的冰柜区域与背景区域进行分离以获得冰柜图像；步骤S4、通过单应性变换算法将所述冰柜图像进行矫正以获得矫正图像；及步骤S5、基于所述矫正图像中的所有像素的位置信息和/或分类信息获得所述冰柜中的内容和所述冰柜的层数，并结合预存的样品模板进行比较，进而判定所述冰柜是否陈列合规，所述预存的样品模板为每个像素对应的位置信息、分类信息和样品种类之间的映射关系。

优选地，在所述步骤S1中，所述图像语义分割模型包括像素级的决策树分类模型或者全卷积神经网络模型中的任一种。

优选地，所述步骤S3中，进一步基于所述冰柜的外形结合所述位置信息和分类信息将所述待测图像中的冰柜区域与背景区域进行分离以获得冰柜图像。

优选地，所述步骤S4包括如下步骤：步骤S41、基于所述步骤S2中获得的位置信息选定多个参考点；步骤S42，根据所述参考点计算获得单应性矩阵；及步骤S43、根据单应性矩阵对所述冰柜图像进行矫正以获得矫正图像。

本发明为了解决上述技术问题还提供一种冰柜陈列检测系统，包括：图像获取模块，配置用于对待测冰柜进行拍照以获得待测图像；图像语义分割模块，配置用于利用图像语义分割模型对所述待测图像中所有像素点进行分类，并分别输出对应像素点的分类信息和位置信息；图像分离模块，配置用于基于所述位置信息和/或分类信息将所述待测图像中的冰柜区域与背景区域进行分离以获得冰柜图像；图像校正模块：配置用于通过单应性变换算法将所述冰柜图像进行矫正以获得矫正图像；分析模块：配置用于基于所述矫正图像中的所有像素的位置信息和/或分类信息获得所述冰柜的层数，并结合预存的样品模板获知所述冰柜中每层样品的陈列是否合规，所述预存的样品模板为每个像素对应的位置信息、分类信息和样品种类之间的映射关系。

优选地，所述图像校正模块包括：选取单元：配置用于基于图像语义分割模块获得的与每个像素点对应的位置信息选择多个参考点；计算单元：配置用于根据所述参考点计算获得单应性矩阵。