[发明专利]一种基于动作行为特征的危险驾驶行为识别方法及系统在审
申请号: | 202111473235.9 | 申请日: | 2021-12-02 |
公开(公告)号: | CN113971797A | 公开(公告)日: | 2022-01-25 |
发明(设计)人: | 杨晓晖;张樱己;冯志全;曲守宁;赵新勇;陈达 | 申请(专利权)人: | 山东海量信息技术研究院;济南大学 |
主分类号: | G06V20/59 | 分类号: | G06V20/59;G06V10/44;G06V10/764;G06V10/82;G06K9/62;G06N3/04;G06N3/08 |
代理公司: | 济南圣达知识产权代理有限公司 37221 | 代理人: | 张勇 |
地址: | 250098 山东省济南*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 动作 行为 特征 危险 驾驶 识别 方法 系统 | ||
1.一种基于动作行为特征的危险驾驶行为识别方法,其特征在于,包括如下步骤:
获取驾驶员驾驶过程中的待识别的自然危险驾驶行为视频;
将待识别的自然危险驾驶行为视频进行预处理得到待识别的自然危险驾驶行为图像;
将预处理后的待识别的自然危险驾驶行为图像输入至训练好的危险驾驶行为检测模型中,获取驾驶员危险驾驶行为识别结果;其中,所述危险驾驶行为检测模型以CenterNet为主干网络,所述CenterNet的主干网络包括Hourglass网络和ResNet-50网络,每个网络通道输出对应的原始特征图,分别对原始特征图处理得到每个网络通道的特征权重,将不同的网络通道的特征权重再作用到原始的特征图对应的网络通道,对原始特征重标定后融合。
2.如权利要求1所述的一种基于动作行为特征的危险驾驶行为识别方法,其特征在于,所述Hourglass网络中采用扩张卷积网络,所述ResNet-50网络的下采样层的卷积核大小和步长进行了修改,同时增加平均池化层。
3.如权利要求2所述的一种基于动作行为特征的危险驾驶行为识别方法,其特征在于,所述扩张卷积网络包括两个普通卷积层和一个扩张卷积层,在所述扩张卷积层前后两个普通卷积层设置跳跃连接,所述跳跃连接用于将从第一个普通卷积层提取的特征信息传输至扩张卷积层得到特征映射,所述特征映射输入到第二个普通卷积层。
4.如权利要求1所述的一种基于动作行为特征的危险驾驶行为识别方法,其特征在于,所述Hourglass网络和ResNet-50网络中分别添加注意力机制,所述注意力机制根据损失值去每个网络通道的特征权重。
5.如权利要求1所述的一种基于动作行为特征的危险驾驶行为识别方法,其特征在于,对原始特征重标定后融合的方式采用Loss值融合法;
或,对原始特征重标定后融合的方式采用特征图融合法。
6.如权利要求1所述的一种基于动作行为特征的危险驾驶行为识别方法,其特征在于,所述将待识别的自然危险驾驶行为视频进行预处理包括:
对采集后的视频进一步筛选,然后将每一帧视频转化成图片保存,将保存好的图片分类,相同的驾驶行为划为一组,使用LabelImg标注工具对数据进行标注,得到文本格式的文件作为该数据集的真实值使用。
7.如权利要求1所述的一种基于动作行为特征的危险驾驶行为识别方法,其特征在于,所述待识别的自然危险驾驶行为图像包括手部、手里拿的东西以及动作。
8.一种基于动作行为特征的危险驾驶行为识别系统,其特征在于,包括:
数据获取模块,被配置为:获取驾驶员驾驶过程中的待识别的自然危险驾驶行为视频;
数据预处理模块,被配置为:将待识别的自然危险驾驶行为视频进行预处理得到待识别的自然危险驾驶行为图像;
危险驾驶行为识别模块,被配置为:将预处理后的待识别的自然危险驾驶行为图像输入至训练好的危险驾驶行为检测模型中,获取驾驶员危险驾驶行为识别结果;其中,所述危险驾驶行为检测模型以CenterNet为主干网络,所述CenterNet的主干网络包括Hourglass网络和ResNet-50网络,每个网络通道输出对应的原始特征图,分别对原始特征图处理得到每个网络通道的特征权重,将不同的网络通道的特征权重再作用到原始的特征图对应的网络通道,对原始特征重标定后融合。
9.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-7中任一项所述的一种基于动作行为特征的危险驾驶行为识别方法中的步骤。
10.一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现如权利要求1-7中任一项所述的一种基于动作行为特征的危险驾驶行为识别方法中的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于山东海量信息技术研究院;济南大学,未经山东海量信息技术研究院;济南大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111473235.9/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种铁路隧道内无砟轨道结构及其纠偏方法
- 下一篇:密封装置及密封结构