[发明专利]一种驾驶员状态监测方法、装置及系统有效
申请号: | 202111041977.4 | 申请日: | 2021-09-07 |
公开(公告)号: | CN113602280B | 公开(公告)日: | 2022-12-20 |
发明(设计)人: | 成一诺;冉洪亮;郭健 | 申请(专利权)人: | 北京经纬恒润科技股份有限公司 |
主分类号: | B60W40/08 | 分类号: | B60W40/08;A61B5/0205;G06V40/10 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 王娇娇 |
地址: | 100015 北京*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 驾驶员 状态 监测 方法 装置 系统 | ||
1.一种驾驶员状态监测方法,其特征在于,应用于处理器,包括:
获得驾驶员在预设历史时间段内的头部图像,其中,所述驾驶员的头部图像由图像采集装置生成;
从所述驾驶员在所述预设历史时间段内的头部图像中获取N帧图像,N为大于2的整数;
对所述N帧图像进行分析,得到N个头部特征数据集和N个嘴部特征数据集;其中,每个头部特征数据集包括多种头部特征数据,所述头部特征数据为头部特征点的横坐标或者纵坐标,所述N个头部特征数据集中包含的头部特征数据的种类相同;所述头部特征点为:右侧眉毛的外侧顶点、左侧眉毛的内侧顶点、右侧眉毛的内侧顶点、左侧眉毛的内侧顶点、左侧眉毛的中间点、左侧眉毛的外侧顶点、右眼的外眼角、右眼的上眼睑中点、右眼的内眼角、右眼的中心点、右眼的下眼睑中点、左眼的内眼角、左眼的上眼睑中点、左眼的外眼角、左眼的中心点、左眼的下眼睑中点、右鼻翼底部、鼻尖、左鼻翼底部、右侧嘴角、上唇的上边缘中点、左侧嘴角、上唇的下边缘中点、下唇的上边缘中点、下唇的下边缘中点、右颧部的边缘点、下巴的边缘点、左颧部的边缘点、头部最小外切框的左上顶点和右下顶点;每个嘴部特征数据集包括多种嘴部特征数据,所述嘴部特征数据为嘴部特征点的纵坐标,所述N个嘴部特征数据集中包含的嘴部特征数据的种类相同;所述嘴部特征点为:上唇的上边缘中点、上唇的下边缘中点、下唇的上边缘中点和下唇的下边缘中点;
基于所述N个头部特征数据集确定所述驾驶员在所述预设历史时间段内是否移动;
基于所述N个嘴部特征数据集确定所述驾驶员在所述预设历史时间段内是否说话,包括:
按照每秒15帧的频率,在所述图像采集装置过去2秒内采集到的驾驶员的头部图像中获取30帧图像,针对所述30帧图像进行分析,得到30个嘴部特征数据集,记为:
其中,所述矩阵中的第i行是对第i帧图像进行分析得到的嘴部特征数据集;针对矩阵中的任意一行,第1列为所述上唇的上边缘中点的纵坐标,第2列为所述上唇的下边缘中点的纵坐标,第3列为所述下唇的上边缘中点的纵坐标,第4列为所述下唇的下边缘中点的纵坐标;
按照确定所述驾驶员的双唇上边缘距离的标准差值;
按照确定所述驾驶员的双唇下边缘距离的标准差值;
其中,σ上为所述驾驶员的双唇上边缘距离的标准差值;σ下为所述驾驶员的双唇下边缘距离的标准差值;μ上为所述驾驶员的双唇上边缘距离的平均值,具体的,μ下为所述驾驶员的双唇下边缘的平均值,具体的,N为嘴部特征数据集的数量,N=30;
若所述驾驶员的双唇上边缘距离的标准差值小于或等于第二阈值,且所述驾驶员的双唇下边缘距离的标准差值小于或等于第二阈值,则确定所述驾驶员在所述预设历史时间段内未说话,否则,确定所述驾驶员在所述预设历史时间段内说话;
如果所述驾驶员在所述预设历史时间段内为未移动且未说话状态,则将所述驾驶员在所述预设历史时间段内的心率和呼吸频率作为所述驾驶员的状态评价依据,其中,所述驾驶员的心率和呼吸频率由基于微波多普勒效应的检测设备生成。
2.根据权利要求1所述的方法,其特征在于,所述基于所述N个头部特征数据集确定所述驾驶员在所述预设历史时间段内是否移动,包括:
确定所述N个头部特征数据集中每一种头部特征数据的标准差值;
根据所述N个头部特征数据集中各种头部特征数据的标准差值确定所述N个头部特征数据集之间的最大标准差值;
如果所述最大标准差值小于或等于第一阈值,则确定所述驾驶员在所述预设历史时间段内未移动,否则,确定所述驾驶员在所述预设历史时间段内发生移动。
3.根据权利要求1所述的方法,其特征在于,所述基于所述N个头部特征数据集确定所述驾驶员在所述预设历史时间段内是否移动,包括:
将所述N个头部特征数据集输入预先完成训练的第一判别模型,得到所述第一判别模型对所述N个头部特征数据集处理后输出的预测结果;
根据所述预测结果确定所述驾驶员在所述预设历史时间段内是否移动。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京经纬恒润科技股份有限公司,未经北京经纬恒润科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111041977.4/1.html,转载请声明来源钻瓜专利网。