[发明专利]冰箱内物品识别方法、冰箱和计算机存储介质

说明书

本发明提供一种冰箱内物品识别方法、冰箱和计算机存储介质，所述方法包括步骤：获取多幅于同一点位拍摄得到的冰箱存储空间图像，并选择一幅所述图像作为基准图像；检测识别并标识所述基准图像内的物品信息；比较其余所述图像与所述基准图像，根据两者间的重复度，将其余所述图像内容分割为相似区域和差别区域；在所述相似区域内沿用所述基准图像内对应物品信息进行标识，抠取所述差别区域图像进行二次检测识别，并进行二次标识。通过将多幅图像进行对比，根据重复程度差别，在图像中划分出差别区域，对差别区域进行二次抠图识别，提高了对图像内物品识别的准确率，减少了漏识别的情况出现。

技术领域

本发明涉及制冷装置领域，具体地涉及一种冰箱内物品识别方法、冰箱和计算机存储介质。

背景技术

随着家用电器智能化的发展，对内部物品进行识别已经是只能冰箱所必需的功能。通常为了实现对冰箱内部物品的识别，冰箱的内部储存空间内都安装有一个或多个摄像头用于拍摄物品，并对拍摄的照片进行处理后生成识别结果。

然而，在图像检测识别过程中，由于灯光、摄像头本身、以及摆放的物体等多种原因，导致无相成像质量不够好，或者图像检测算法本身泛化能力不够高，导致识别准确率低，常常会出现漏识别的情况，尤其是当前后两幅图像中的物体位置没有发生变化，于其中一幅检测到的物体，在另一幅中没有检测出来时，严重影响了用户体验。

发明内容

本发明的目的在于提供一种。

本发明提供一种一种冰箱内物品识别方法，其特征在于，包括步骤：

获取多幅于同一点位拍摄得到的冰箱存储空间图像，并选择一幅所述图像作为基准图像；

检测识别并标识所述基准图像内的物品信息；

比较其余所述图像与所述基准图像，根据两者间的重复度，将其余所述图像内容分割为相似区域和差别区域；

在所述相似区域内沿用所述基准图像内对应物品信息进行标识，抠取所述差别区域图像进行二次检测识别，并进行二次标识。

作为本发明的进一步改进，“获取多幅于同一点位拍摄得到的冰箱存储空间图像”具体包括：

在每次检测到满足拍摄要求后，分别拍摄图像，或

以固定时间间隔依次拍摄得到多幅图像，或

拍摄一段时间内的视频影像，并以固定帧数间隔截取所述视频得到多幅图像。

作为本发明的进一步改进，“检测识别所述基准图像内的物品信息”具体包括：

基于检测算法模型，获取所述基准图像内不同物品，并标识其目标检测框；

基于分类网络模型，对所述目标检测框内的物品进行分类识别，获取其信息，并对物品进行标识。

作为本发明的进一步改进，“比较其余所述图像与所述基准图像，根据两者间的重复度，将其余所述图像内容分割为相似区域和差别区域”具体包括：

获取其余所述图像内不同物品的目标检测框；

将所述基准图像目标检测框平移到其余所述图像中，计算目标检测框之间的交并比，剔除其中与任一目标检测框交并比大于预设阈值的目标检测框，将剩余目标检测框标记为二次目标检测框；

将二次目标检测框内区域标识为差别区域，其余区域标识为相似区域。

作为本发明的进一步改进，“所述相似区域采用所述基准图像内物品信息，抠取所述差别区域图像进行二次检测识别”具体包括：

将所述基准图像内对应于所述相似区域内的物品识别信息直接标识在其余所述图像相同位置处；

将其余所述图像中的所述差别区域抠取得到二次检测图像；