[发明专利]根据驾驶员状态自动调整驾驶员辅助装置的方法和装置有效
申请号: | 202010075360.3 | 申请日: | 2020-01-22 |
公开(公告)号: | CN111507171B | 公开(公告)日: | 2023-08-01 |
发明(设计)人: | 金桂贤;金镕重;金鹤京;南云铉;夫硕焄;成明哲;申东洙;吕东勋;柳宇宙;李明春;李炯树;张泰雄;郑景中;诸泓模;赵浩辰 | 申请(专利权)人: | 斯特拉德视觉公司 |
主分类号: | G06V40/18 | 分类号: | G06V40/18;G06V40/10;G06V10/82;G06N3/0475;B60R16/037 |
代理公司: | 北京派特恩知识产权代理有限公司 11270 | 代理人: | 李光辉;马芬 |
地址: | 韩国庆*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 根据 驾驶员 状态 自动 调整 辅助 装置 方法 | ||
1.一种根据驾驶员状态调整驾驶员辅助装置的位置的方法,其特征在于,包括:
步骤(a),当获取驾驶员坐在车辆的驾驶座上并启动所述车辆之后的、所述驾驶员的至少一个上半身图像和至少一个下半身图像时,执行将所述上半身图像与所述下半身图像输入到姿势预测网络中的过程,从而使所述姿势预测网络,(i)获取位于所述上半身图像和所述下半身图像中的、与所述驾驶员相对应的一个以上的身体关键点,(ii)参考所述身体关键点计算所述驾驶员的至少一个身体部位的长度,(iii)参考所述驾驶员的已计算的所述身体部位的长度调整所述驾驶座的位置;以及
步骤(b),所述车辆在所述驾驶座的位置已调整的状态下行驶时,位置调整装置执行,过程(i),将所述上半身图像输入到人脸检测器中,使所述人脸检测器,在所述上半身图像上检测所述驾驶员的至少一个面部;过程(ii),将所述面部输入到眼睛检测器中,使所述眼睛检测器,在所述面部中检测所述驾驶员的至少一个眼部;过程(iii),在所述检测到的眼部中将与所述驾驶员的至少一个眼睛相对应的2D坐标与已调整的驾驶座的位置输入到3D坐标转换器中,从而使所述3D坐标转换器,参考所述驾驶座的位置和所述眼睛的2D坐标生成所述驾驶员的所述眼睛的3D坐标,并参考所述眼睛的所述3D坐标调整所述车辆的至少一个镜子的至少一个位置;
其中,在所述步骤(a)中,
所述位置调整装置,使所述姿势预测网络,(i)通过特征提取器从所述上半身图像和所述下半身图像中提取一个以上的特征,分别生成一个以上的特征张量,(ii)通过关键点热图和部分亲和力字段提取器,分别生成与每个所述特征张量相对应的一个以上的关键点热图和一个以上的部分亲和力字段,(iii)通过关键点分组层从每个所述关键点热图中提取一个以上的关键点,参考每个所述部分亲和力字段,分别对已提取的关键点进行分组生成与所述驾驶员相对应的所述身体关键点。
2.根据权利要求1所述的根据驾驶员状态调整驾驶员辅助装置的位置的方法,其特征在于,
所述位置调整装置,使所述姿势预测网络,通过所述特征提取器的至少一个卷积层,将至少一个卷积运算分别使用于所述上半身图像和所述下半身图像中,生成每个所述特征张量。
3.根据权利要求1所述的根据驾驶员状态调整驾驶员辅助装置的位置的方法,其特征在于,
所述位置调整装置,使所述姿势预测网络,通过所述关键点热图和部分亲和力字段提取器的全卷积网络或至少一个1×1卷积层,对每个所述特征张量使用至少一个全卷积运算或至少一个1×1卷积运算,从而分别生成与每个所述特征张量相对应的所述关键点热图和所述部分亲和力字段。
4.根据权利要求1所述的根据驾驶员状态调整驾驶员辅助装置的位置的方法,其特征在于,
所述位置调整装置,使所述姿势预测网络,通过所述关键点分组层,提取每个所述关键点热图中的每个最高点,作为与每个所述关键点热图相对应的每个所述关键点。
5.根据权利要求4所述的根据驾驶员状态调整驾驶员辅助装置的位置的方法,其特征在于,
所述位置调整装置,使所述姿势预测网络,通过所述关键点分组层,参考每个所述部分亲和力字段,分别连接已提取的关键点对中具有最高相互连接概率的对,从而对已提取的关键点进行分组。
6.根据权利要求1所述的根据驾驶员状态调整驾驶员辅助装置的位置的方法,其特征在于,
在所述步骤(b)中,
所述位置调整装置,使所述人脸检测器,(i)通过卷积层对所述上半身图像使用至少一个卷积运算,生成至少一个特征图,(ii)通过区域生成网络生成与所述特征图上的一个以上的对象相对应的一个以上的建议框,(iii)通过池化层,对与所述特征图上的所述建议框相对应的一个以上的区域使用至少一个池化运算,生成至少一个特征矢量,(iv)通过全连接层,对所述特征矢量使用至少一个全连接运算生成至少一个全连接输出值,(v)对所述全连接层的所述全连接输出值,使用分类运算和回归运算,分别输出关于所述对象的类别信息和回归信息之后,通过分类层和回归层,检测所述上半身图像上的所述驾驶员的所述面部,其中,每个所述对象对应于每个所述建议框。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于斯特拉德视觉公司,未经斯特拉德视觉公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010075360.3/1.html,转载请声明来源钻瓜专利网。
- 上一篇:用于接收信号的检测的装置和方法
- 下一篇:半导体基板的分离方法和分离用夹具