[发明专利]一种基于人脸和手势识别的汽车自动解锁控制方法及系统

权利要求书

1.一种基于人脸和手势识别的汽车自动解锁控制方法，其特征在于：包括以下步骤，

采集模块(100)对外部环境进行监控并采集外部图像；

人脸检测模块(200)识别出人脸图像并进行匹配；

判断是否为车主，若是则提示模块(300)做出提示，并等待车主做出手势；

采集模块(100)捕获车主的手势；

手势检测模块(400)对车主的手势进行识别，并在识别到解锁动作时发送信号给车锁模块(500)解锁车门。

2.如权利要求1所述的基于人脸和手势识别的汽车自动解锁控制方法，其特征在于：停车且车主拔出钥匙下车关闭车门后，DILU监控系统(600)控制车辆，并开启所述采集模块(100)，开始对外部环境进行实时监控。

3.如权利要求1或2所述的基于人脸和手势识别的汽车自动解锁控制方法，其特征在于：所述人脸检测模块(200)的工作还包括以下步骤，

采集模块(100)采集车主的人脸图像并存储于人脸检测模块(200)；

人脸识别模块(201)基于opencv4对采集模块(100)采集的外部图像中的人脸进行识别追踪；

将识别到的人脸图像传输至人脸匹配模块(202)，基于人脸匹配算法与车主的人脸图像对比，判断识别到的人脸图像是否为车主的人脸图像。

4.如权利要求3所述的基于人脸和手势识别的汽车自动解锁控制方法，其特征在于：所述人脸图像的对比还包括以下步骤，

对脸部特征编码模型进行训练，输出训练后的脸部特征编码模型；

利用训练后的脸部特征编码模型分别对输入的人脸图像和车主的人脸图像进行特征向量提取，得到输入的人脸图像和车主的人脸图像的128维特征向量；

利用最近邻算法计算两张图像的128维特征向量的欧氏距离判断其相似度，若相似度大于某个阈值，则认为不是车主，否则判断为车主。

5.如权利要求4所述的基于人脸和手势识别的汽车自动解锁控制方法，其特征在于：所述判断还包括以下步骤，

若判断识别到的人脸图像是车主的人脸图像，则提示模块(300)做出提示，且采集模块(100)等待车主做出手势；

若判断识别到的人脸图像不是车主的人脸图像，则采集模块(100)继续对外部环境进行监控，并由人脸检测模块(200)识别出其它人脸图像进行匹配。

6.如权利要求4或5所述的基于人脸和手势识别的汽车自动解锁控制方法，其特征在于：所述手势检测模块(400)的工作还包括以下步骤，

通过采集模块(100)采集预先设定的车辆解锁动作，并存储于手势检测模块(400)中；

手势识别模块(401)基于opencv4对采集模块(100)监控的外部环境中车主的整体动作进行追踪；

将追踪到的动作图像传输至手势匹配模块(402)基于手势匹配算法与预先设定的车辆解锁动作对比，判断车主意图。

7.如权利要求6所述的基于人脸和手势识别的汽车自动解锁控制方法，其特征在于：所述手势匹配算法为Convolutional Pose Machine算法，由全卷积网络序列化组成，卷积网络直接在前一阶段的置信图操作，输出越来越精细化的关节点位置估计结果，对最终得到的车主动作与预先设定的车辆解锁动作，一致时判断为解锁意图。

8.如权利要求7所述的基于人脸和手势识别的汽车自动解锁控制方法，其特征在于：所述判断车主意图还包括以下步骤，

若手势匹配模块(402)判断追踪到的动作图像是车辆解锁动作，则发送信号给车锁模块(500)，令车辆自动解锁；

若手势匹配模块(402)判断追踪到的动作图像不是车辆解锁动作，则采集模块(100)继续对车主的整体动作进行追踪并传输至手势检测模块(400)。