[发明专利]售货柜的视觉识别方法、装置、电子设备和可读存储介质

说明书

本申请实施例涉及机器视觉技术领域，提供了一种售货柜的视觉识别方法、装置、电子设备和可读存储介质，售货柜具有至少两个摄像头，视觉识别方法包括：基于摄像头采集的图像信息，确定轨迹特征；将各摄像头的轨迹特征划分为至少一段，并确定每段的动作属性；将每个摄像头对应的每段的动作属性，投影至同一时间轴，得到时间轴上各时段的动作属性；对时间轴上各时段的动作属性，若相邻时段为同种取放类型的动作属性，则保留最大值，得到整合后的动作属性；对整合后的动作属性按照同种取放类型的物品数量相加，异种取放类型的物品数量相减，得到识别结果。本申请的售货柜的视觉识别方法，可以消除部分摄像头漏拍带来的影响，实现各种场景下准确识别。

技术领域

本申请涉及机器视觉技术领域，尤其涉及一种售货柜的视觉识别方法、装置、电子设备和可读存储介质。

背景技术

售货柜安装有用于采集图像的至少两个摄像头，通过分析图像可以得到用户取/放物品的轨迹特征，并通过分析轨迹特征中取/放物品的动作属性，识别到用户实际取/放的物品，最后根据识别结果，生成订单信息。

由于各摄像头的角度问题，某些摄像头可能漏拍，经常会出现各摄像头识别到的轨迹特征中取/放物品的动作属性不一致的情形。

相关技术中，在面对这一情形时，采用简单的布尔运算确定最后的识别结果，这种方式误差很大，难以适用于多种不同的场景，容易造成用户与运营商的纠纷。

发明内容

本申请提供一种售货柜的视觉识别方法、装置、电子设备和可读存储介质，以实现准确识别。

本申请提供一种售货柜的视觉识别方法，所述售货柜具有至少两个摄像头，所述方法包括：基于所述摄像头采集的图像信息，确定各摄像头对应的同一类物品的轨迹特征；将各摄像头的所述轨迹特征划分为至少一段，并确定每段的动作属性，所述动作属性用于表征物品取放类型及取放类型对应的物品数量，其中，取放类型包括取出型和放入型；将每个所述摄像头对应的每段的动作属性，投影至同一时间轴，对不同摄像头对应的动作属性在同一时段的投影依次按照同种取放类型的物品数量取最大值，再将异种取放类型的物品数量最大值相减之差的绝对值作为所述时间轴上该时段的动作属性的物品数量，且数量最多的取放类型作为该时间段的取放类型；对所述时间轴上各时段的动作属性，若相邻时段为同种取放类型的动作属性，则保留最大值，删除相邻时段的其他同种取放类型的动作属性，得到整合后的动作属性；对所述整合后的动作属性按照同种取放类型的物品数量相加，再将异种取放类型的物品数量相减之差的绝对值作为识别结果的物品数量，且将数量最多的取放类型作为所述识别结果的取放类型。

根据本申请提供的一种售货柜的视觉识别方法，在同一摄像头包括多个轨迹特征的情况下，所述确定每段的动作属性，包括：

对每段内同种取放类型的物品数量相加，异种取放类型的物品数量保留，得到每段的动作属性。

根据本申请提供的一种售货柜的视觉识别方法，所述将各摄像头的所述轨迹特征划分为至少一段，包括：

对于各摄像头，以所述轨迹特征的首尾时刻以及物品出入线时刻的中点为节点划分所述轨迹特征。

根据本申请提供的一种售货柜的视觉识别方法，所述将将每个所述摄像头对应的每段的动作属性，投影至同一时间轴，包括：

将每个所述摄像头的每个节点均投影至同一时间轴，以相邻的两个所述节点确定一个所述时段；

基于所述轨迹特征划分为的各段的动作属性，确定所述时段的动作属性。

本申请还提供一种售货柜的视觉识别装置，所述售货柜具有至少两个摄像头，所述装置包括：

轨迹特征识别模块，用于基于所述摄像头采集的图像信息，确定各摄像头对应的同一类物品的轨迹特征；