[发明专利]基于深度学习的驾驶员状态检测方法、系统、设备及介质在审
申请号: | 201911363106.7 | 申请日: | 2019-12-26 |
公开(公告)号: | CN113051959A | 公开(公告)日: | 2021-06-29 |
发明(设计)人: | 段兴;陈荡荡;朱力;吕方璐;汪博 | 申请(专利权)人: | 深圳市光鉴科技有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06K9/32 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 518054 广东省深圳市南山区粤海街道高*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 深度 学习 驾驶员 状态 检测 方法 系统 设备 介质 | ||
1.一种基于深度学习的驾驶员状态检测方法,其特征在于,包括如下步骤:
步骤S1:获取驾驶员图像;所述驾驶员图像为在驾驶员处于驾驶状态时采集,展示驾驶员的驾驶状态的图像;
步骤S2:对于所述驾驶员图像依次进行人脸检测、关键点检测,以获取所述驾驶员图像中人脸区域的多个目标ROI区域;
步骤S3:对所述驾驶员图像卷积处理,生成特征图,进而根据所述目标ROI区域对所述特征图进行池化处理,以提取多个目标ROI区域在所述特征图中对应的部分特征图;
步骤S4:对多个所述目标ROI区域对应的部分特征图进行拼接处理生成目标ROI拼接特征图,进而根据所述目标ROI拼接特征图确定所述驾驶员图像中的驾驶员状态。
2.根据权利要求1所述的基于深度学习的驾驶员状态检测方法,其特征在于,所述步骤S2包括如下步骤:
步骤S201:对所述驾驶员图像进行人脸检测,确定所述驾驶员图像中的人脸区域;
步骤S202:对所述人脸区域进行关键点检测,确定所述人脸区域中的多个目标ROI区域的位置;
步骤S203:对检测出人脸区域和目标ROI区域的位置的所述驾驶员图像进行归一化处理至预设定的尺寸以生成待检测图像。
3.根据权利要求1所述的基于深度学习的驾驶员状态检测方法,其特征在于,所述步骤S3包括如下步骤:
步骤S301:对所述驾驶员图像卷积处理,生成特征图;
步骤S302:根据所述目标ROI区域生成对应的ROI标签;
步骤S303:根据所述ROI标签对所述特征图进行池化处理,以提取多个目标ROI区域在所述特征图中对应的部分特征图。
4.根据权利要求3所述的基于深度学习的驾驶员状态检测方法,其特征在于,所述目标ROI区域包括眼部ROI区域和嘴部ROI区域;
所述驾驶员状态包括闭眼状态和打哈欠状态。
5.根据权利要求1所述的基于深度学习的驾驶员状态检测方法,其特征在于,所述步骤S1包括如下步骤:
步骤S101:采集驾驶员处于驾驶状态的视频流;
步骤S102:获取所述视频流,将所述视频流分解为若干依次按时间顺序依次排列的图像帧;
步骤S103:获取每一所述图像帧,所述图像帧为所述驾驶员图像。
6.一种基于深度学习的驾驶员状态检测系统,其特征在于,包括如下模块:
图像获取模块,用于获取驾驶员图像;所述驾驶员图像为在驾驶员处于驾驶状态时采集,展示驾驶员的驾驶状态的图像;
人脸检测模块,用于对于所述驾驶员图像依次进行人脸检测、关键点检测,以获取所述驾驶员图像中人脸区域的多个目标ROI区域;
特征提取模块,用于对所述驾驶员图像卷积处理,生成特征图,进而根据所述目标ROI区域对所述特征图进行池化处理,以提取多个目标ROI区域在所述特征图中对应的部分特征图;
拼接识别模块,用于对多个所述目标ROI区域进行拼接处理生成目标ROI拼接特征图,进而根据所述目标ROI拼接特征图确定所述驾驶员图像中的驾驶员状态。
7.一种基于深度学习的驾驶员状态检测系统,其特征在于,包括如下模块:
图像获取模块,用于获取驾驶员图像;所述驾驶员图像为在驾驶员处于驾驶状态时采集,展示驾驶员的驾驶状态的图像;
人脸检测模块,用于对于所述驾驶员图像依次进行人脸检测、关键点检测,以获取所述驾驶员图像中人脸区域的多个目标ROI区域;
状态识别模块,用于对所述驾驶员图像卷积处理,生成特征图,进而根据所述目标ROI区域对所述特征图进行池化处理,以提取多个目标ROI区域在所述特征图中对应的部分特征图,对多个所述目标ROI区域对应的部分特征图进行拼接处理生成目标ROI拼接特征图,进而根据所述目标ROI拼接特征图确定所述驾驶员图像中的驾驶员状态。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市光鉴科技有限公司,未经深圳市光鉴科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911363106.7/1.html,转载请声明来源钻瓜专利网。
- 上一篇:基于深度学习的驾驶员状态检测方法、系统、设备及介质
- 下一篇:动压气体轴承