[发明专利]一种检测人“玩手机”的方法及系统

说明书

本发明公开了一种检测人“玩手机”的方法，包括：获取当前环境中的视频信号，得到待检测视频和训练样本；检测所述视频中所有的人和手机;如果检测到所述视频中没有人或手机出现，则判断为没有人玩手机；如果检测到所述视频中有人和手机出现，用特征提取模型提取每个人和每个手机的特征；将所述每个人和手机的特征输入到特征关系判断模型，计算每个人和手机之间的关系特征；将每个人和每个手机的特征、以及它们之间的关系特征输入到判断模型，判断当前时刻中每个人是否在玩手机；对判定结果进行处理。本发明的方法结合人体关节点坐标，手机的尺寸坐标，手机与人体的动作意图关系、空间关系以及深度学习方法，并结合时序模型，最终判断环境中的人是否在玩手机，大大提高了检测精度。

技术领域

本发明涉及计算机视频领域，特别涉及一种检测人“玩手机”的方法及系统。

技术背景

随着信息技术的快速发展，手机的使用越来越普遍，人对于手机的依赖程度越来越严重。在实际场景中，由于玩手机造成的事故屡见不鲜。比如驾驶员在开车时因为玩手机而手离开方向盘，导致发生车祸。行人在过马路时因为玩手机与车辆相撞。一些特殊行业如铁路部门，需要对员工采用军事化的管理方式，对员工的一些违规行为要做到实时预警，其中就包括通过摄像头检测员工是否玩手机。例如在学校，需要监控课堂纪律，检测学生是否有玩手机的行为。在现有的文献和专利中，关于人“玩手机”专利较少。主要基于计算机视觉的主流方法主要是针对手机和手的区域作判断，或者自定义一些规则来判断是否“玩手机”。如公开号为CN 110674728 A的专利，基于视频图像识别玩手机方法、装置、服务器及存储介质。利用玩手机过程中，人体手部与手机之间所存在的变化关系，通过检测设定周期内人体手部变化情况与手机色彩变化情况，以实现玩手机行为的检测。该方法只是简单应用人体手部变化情况和手机色彩变化，在实际应用的复杂场景中鲁棒性不高。公开号为CN111191576 A的发明，人员行为目标检测模型构建方法、智能分析方法及系统。对于玩手机行为，该发明主要截取手机的区域，然后判断手机屏幕的亮度以及来判断帧数统计来判断是否玩手机。该方法是通过自定义的规则来判断，不具体类似人的智能判断。上述方法鲁棒性不强，适应场景有限难以满足多样的现实需求。随着深度学习等技术的发展，利用人体姿态估计算法，目标检测算法，视线估计和时序模型等方法，可以更精确地判断出人是否在“玩手机”。

目前，现有技术的关于检测人“玩手机”的方法存在相关算法稀少并且检测精度不高的问题。

发明内容

本发明的目的是克服上述背景技术中不足，提供一种检测人“玩手机”的方法、系统，可用于解决现有技术中检测精度不高的技术问题。

为了达到上述的技术效果，本发明采取以下技术方案：

一种检测人“玩手机”的方法，所述方法包括以下步骤：

步骤S1. 获取当前环境中的视频信号，得到待检测视频和训练样本；

步骤S2. 检测所述视频中所有的人和手机；

步骤S3. 如果检测到所述视频中没有人或手机出现，则判断为没有人玩手机；

步骤S4. 如果检测到所述视频中有人和手机出现，用特征提取模型提取每个人和每个手机的特征；

步骤S5. 将所述每个人和手机的特征输入到特征关系判断模型，计算每个人和手机之间的关系特征；

步骤S6. 将每个人和每个手机的特征、以及它们之间的关系特征输入到判断模型，判断当前时刻中每个人是否在玩手机；

步骤S7. 对检测结果进行处理。

进一步地，步骤S2至少包括，利用计算机视觉算法检测出当前帧图片中的所有人和手机。

进一步地，步骤S4所述每个人和每个手机的特征至少包括：

a. 每个人体的二维人体关节点坐标、三维人体关节点坐标；