[发明专利]基于眼球追踪的智能驾驶评估训练方法、系统有效
申请号: | 202110693938.6 | 申请日: | 2021-06-22 |
公开(公告)号: | CN113408431B | 公开(公告)日: | 2023-03-10 |
发明(设计)人: | 于东壮 | 申请(专利权)人: | 青岛小鸟看看科技有限公司 |
主分类号: | G06V40/18 | 分类号: | G06V40/18;G06V10/77;G06V10/774;G06V10/82;G06N3/04;G06N3/08;G09B9/04;G09B9/052 |
代理公司: | 北京风雅颂专利代理有限公司 11403 | 代理人: | 郭曼 |
地址: | 266100 山东省青岛市崂山区松*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 眼球 追踪 智能 驾驶 评估 训练 方法 系统 | ||
1.一种基于眼球追踪的智能驾驶评估训练方法,其特征在于,包括:
获取驾驶人员的眼球追踪样本信息、车辆驾驶样本信息,将所述眼球追踪样本信息、所述车辆驾驶样本信息与驾驶人员的驾驶等级结果相映射以作为样本数据;
将所述样本数据输入PNN模型以生成驾驶测评模型;将所述样本数据输入PNN模型以生成驾驶测评模型的过程,包括:
将所述眼球追踪样本信息的三维向量作为第一数据;将所述车辆运行轨迹与所述运行车速构成的四维向量作为第二数据;将所述车辆运行轨迹、所述运行车速与障碍物信息构成的五维向量作为第三数据;
将所述第一数据、所述第二数据、所述第三数据作为所述PNN模型的输入量,并将所述驾驶等级结果作为所述PNN模型的期望输出矢量进行反复训练以获取预测驾驶模型;
通过已知驾驶等级结果的车辆驾驶数据对所述预测驾驶模型进行测试验证;其中,若所述预测驾驶模型根据所述车辆驾驶数据输出的预测结果与所述已知的驾驶等级结果不一致,则继续对所述预测驾驶模型进行反复训练直至所述预测驾驶模型根据所述车辆驾驶数据输出的预测结果与所述已知的驾驶等级结果相一致;若所述预测驾驶模型根据所述车辆驾驶数据输出的预测结果与所述已知的驾驶等级结果相一致,则将所述预测驾驶模型作为驾驶测评模型;
采集用户的眼球追踪信息和车辆驾驶信息,并通过所述驾驶测评模型对所采集的眼球追踪信息和车辆驾驶信息进行数据分析以获取驾驶测评结果;
根据所述驾驶测评结果生成驾驶训练模型以针对所述用户进行驾驶训练。
2.如权利要求1所述的基于眼球追踪的智能驾驶评估训练方法,其特征在于,获取驾驶人员的眼球追踪样本信息、车辆驾驶样本信息的过程,包括:
通过VR头戴追踪所述驾驶人员的眼球以获取所述驾驶人员的眼球追踪样本信息,并通过VR虚拟驾驶游戏获取所述驾驶人员根据所述VR虚拟驾驶游戏中的指令进行驾驶操作的车辆驾驶样本信息。
3.如权利要求2所述的基于眼球追踪的智能驾驶评估训练方法,其特征在于,通过VR虚拟驾驶游戏获取所述驾驶人员根据所述VR虚拟驾驶游戏中的指令进行驾驶操作的车辆驾驶样本信息的过程,包括:
通过unity3d创建VR虚拟驾驶游戏;
在所述VR虚拟驾驶游戏中创建驾驶情境和障碍关卡;
基于所述驾驶情境和所述障碍关卡发出关于车速及姿势的指令;
获取所述驾驶人员根据所述指令进行驾驶操作的车辆驾驶样本信息。
4.如权利要求1所述的基于眼球追踪的智能驾驶评估训练方法,其特征在于,
所述眼球追踪样本信息包括眼球运动数据和瞳孔移动数据。
5.如权利要求1所述的基于眼球追踪的智能驾驶评估训练方法,其特征在于,
所述车辆驾驶样本信息包括车辆运行轨迹、运行车速、障碍信息和驾驶结果。
6.如权利要求3所述的基于眼球追踪的智能驾驶评估训练方法,其特征在于,采集用户的眼球追踪信息和车辆驾驶信息,并通过所述驾驶测评模型对所采集的眼球追踪信息和车辆驾驶信息进行数据分析以获取驾驶测评结果的过程,包括:
将所述驾驶测评模型存储在所述VR虚拟驾驶游戏中以生成VR虚拟驾驶测试模块;
通过VR头戴追踪所述用户的眼球以获取所述用户的眼球追踪信息,通过所述VR虚拟驾驶测试模块中的VR虚拟驾驶游戏获取所述用户的车辆驾驶信息;
通过所述VR虚拟驾驶测试模块中的驾驶测评模型根据所述眼球追踪信息与所述车辆驾驶信息获取所述用户的驾驶测评结果;其中,所述驾驶测评结果至少包括所述用户的驾驶等级结果。
7.如权利要求5所述的基于眼球追踪的智能驾驶评估训练方法,其特征在于,根据所述驾驶测评结果生成驾驶训练模型以针对所述用户进行驾驶训练的过程,包括:
根据所述驾驶测评结果对所述用户的车速和障碍物进行放大或缩小调节以生成驾驶训练模型;
基于所述驾驶训练模型获取所述用户的训练结果,并根据所述训练结果对所述驾驶训练模型进行参数调整以针对所述用户进行驾驶训练。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于青岛小鸟看看科技有限公司,未经青岛小鸟看看科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110693938.6/1.html,转载请声明来源钻瓜专利网。