[发明专利]一种基于计算机视觉的餐桌清扫智能提醒方法

说明书

本发明公开了一种基于计算机视觉的餐桌清扫智能提醒方法，包括以下步骤：（1）获取餐厅内的视频图像；（2）对获得的每帧视频图像；（3）获取每个餐桌的矩形框位置；（4）在每个餐桌周边位置进行人体检测；（5）对检测到的人体进行持续跟踪；（6）对待检测区域进行持续的人体检测；（7）对餐桌桌面进行清洁度检测。本发明方法采用计算机视觉和人工智能等技术，自动监控分析每个餐桌的清扫状况，当系统判断某一桌的客人离开后且餐桌尚未清扫时，即向餐厅管理者发出餐桌需要清扫提醒。本发明能够实现对餐厅餐桌清扫情况的智能分析，节省人力物力，帮助更高效地管理餐厅，具有重要的现实应用意义。

技术领域

本发明涉及图像分析技术领域，特别地，涉及一种基于计算机视觉的餐桌清扫智能提醒系统。

背景技术

随着国家经济形势越来越好，居民的消费热情也越来越高。日常去餐厅消费的人越来越多，一些网红餐厅更是人满为患，常常需要排队很久才能就餐。特别是在用餐高峰期时，很多餐厅常常面临一位难求的情况。这种情况下，一个迫切的现实需求是，当客人用完餐，离开餐厅后，要及时清扫餐桌，做好清洁整理，准备将该餐桌提供给下一个客人用餐。因此，餐厅的管理者们需要及时知悉店里的餐桌清扫状况，在客人离开的时候及时打算餐桌。然而，很多餐厅服务人员繁忙或人手不够，或是很多餐厅采用先付款后用餐的模式，这些餐厅无法及时掌握什么时候应该清扫餐桌。传统的方法需要服务员们时刻盯着用餐餐桌，这样需要消耗大量的人力，且容易发生遗漏，尤其是对那些服务员人数较少的餐厅更加不利。

发明内容

本发明的目的在于提供一种基于计算机视觉的餐桌清扫智能提醒方法，以解决背景技术中提出的问题。

为实现上述目的，本发明提供了一种基于计算机视觉的餐桌清扫智能提醒方法，包括以下步骤：

S1、获取餐厅内的视频图像，其中视频图像包括所有目标检测餐桌；

S2、对获得的每帧视频图像，采用基于深度学习的目标检测技术识别出其中每个餐桌的位置；

S3、获取每个餐桌的矩形框位置；

S4、在每个餐桌周边位置进行人体检测；若检测到某一餐桌周边位置有人体存在，则认为正有客人在此餐桌就餐；

S5、对检测到的人体进行持续跟踪；在检测到人体离开其所就餐的餐桌后，开始计时；就餐客人离开后的餐桌被称为待检测餐桌；

S6、对待检测餐桌进行持续的人体检测；在重新检测到人体出现在该待检测餐桌周边位置后，对该人体进行行人重识别，以确认该行人是暂时离开后又返回的客人还是落座的新客人；如一段时间后，之前就餐的客人仍未落座该待检测餐桌或落座的客人属于新客人，则认为之前就餐的客人已经离开；

S7、对待检测餐桌的桌面进行清洁度检测；若检测到当前待检测餐桌表面存在遗留碗筷及食物残渣的情况，则发出餐桌清扫提醒给服务人员，由服务人员前往该待检测餐桌进行核查或清扫。

进一步的，所述步骤S1中，采用餐厅视频采集系统获取餐厅内的视频图像，所述餐厅视频采集系统包括至少一个摄像头、处理计算机和声光提示器，所述摄像头用于向下俯拍餐桌，所述处理计算机用于接收并处理所述摄像头拍摄的视频数据，所述声光提示器用于与所述处理计算机连接，用于提醒管理者某个餐桌需要清扫。

进一步的，所述步骤S3中，利用Yolo系列检测算法检测出餐桌的矩形框位置。

进一步的，所述步骤S3中，获取每个餐桌的矩形框位置的具体方法为：首先统计连续m帧图像的餐桌检测结果，即每帧图像中每个餐桌的检测矩形框；然后采用非极大值抑制方法确定每个餐桌的矩形框位置。

进一步的，所述步骤S4中，在每个餐桌周边位置进行人体检测的具体方法为：

(1)选取以餐桌中心位置为矩形中心，长宽分别为餐桌矩形框的长宽2倍的矩形区域为待检测区域；