[发明专利]多视角图像对比检测的订单生成方法及智能售货机

权利要求书

1.一种多视角图像对比检测的订单生成方法，其特征在于，所述方法包括：

获取第一主摄像头从第一视角采集的第一主视频和第二主摄像头从不同于所述第一视角的第二视角采集的同一购物事件的第二主视频；

根据所述第一主视频和所述第二主视频中的各帧图像的采集时序，将所述第一主视频与所述第二主视频的各帧图像依次进行物理拼接，得到目标视频；

利用目标检测模型对所述目标视频的各帧图像进行检测，输出所述目标视频中与所述第一主视频的各帧图像对应的第一检测结果和与所述第二主视频的各帧图像对应的第二检测结果；

根据所述第一检测结果和所述第二检测结果，输出当前购物事件对应的各目标商品的商品订单信息。

2.根据权利要求1所述的多视角图像对比检测的订单生成方法，其特征在于，所述获取第一主摄像头从第一视角采集的第一主视频和第二主摄像头从不同于所述第一视角的第二视角采集的同一购物事件的第二主视频包括：

获取第三摄像头采集的智能售货机当前的售货机状态视频；

对所述售货机状态视频的各帧图像进行分析，输出智能售货机的柜门状态信息，其中，所述柜门状态信息包括开启状态信息和关闭状态信息；

控制所述第一主摄像头和所述第二主摄像头根据所述开启状态信息采集智能售货机的商品区域的视频数据，控制所述第一主摄像头和所述第二主摄像头根据所述关闭状态信息停止采集智能售货机的商品区域的视频数据，得到所述第一主视频和所述第二主视频。

3.根据权利要求1或2所述的多视角图像对比检测的订单生成方法，其特征在于，所述获取第一主摄像头从第一视角采集的第一主视频和第二主摄像头从不同于所述第一视角的第二视角采集的同一购物事件的第二主视频包括：

获取所述第一主摄像头和所述第二主摄像头采集相同时序对应的各帧图像的间隔时间；

根据所述间隔时间，分别控制所述第一主摄像头和所述第二主摄像头采集同一购物事件的视频图像，得到所述第一主视频和所述第二主视频；

其中，所述间隔时间小于帧率对应的两帧图像的时间间隔。

4.根据权利要求3所述的多视角图像对比检测的订单生成方法，其特征在于，所述根据所述第一主视频和所述第二主视频中的各帧图像的采集时序，将所述第一主视频与所述第二主视频的各帧图像依次进行物理拼接，得到目标视频包括：

获取所述第一主视频对应的第一起始时刻和所述第二主视频对应的第二起始时刻；

根据所述第一起始时刻、所述第二起始时刻和所述间隔时间，将所述第一主视频的各帧图像与所述第二主视频中时序相对应的各帧图像进行一一合并，生成所述目标视频；

其中，所述目标视频的每帧图像尺寸为所述第一主视频的各帧图像的尺寸与第二主视频对应的各帧图像的尺寸之和。

5.根据权利要求3所述的多视角图像对比检测的订单生成方法，其特征在于，所述利用目标检测模型对所述目标视频的各帧图像进行检测，输出所述目标视频中与所述第一主视频的各帧图像对应的第一检测结果和与所述第二主视频的各帧图像对应的第二检测结果包括:

将所述目标视频的各帧图像分为属于所述第一主视频的第一图像区域和属于所述第二主视频的第二图像区域；

利用所述目标检测模型对所述目标视频的各帧图像进行检测，得到与所述第一图像区域对应的第一检测结果和与所述第二图像区域对应的第二检测结果；

其中，所述第一检测结果和所述第二检测结果均包含：各商品的类别、与各商品一一对应的置信度和所有帧图像检出的各类商品各自对应的平均置信度。