[发明专利]相机自运动参数估计模型的训练方法、装置及存储介质有效
申请号: | 201910468496.8 | 申请日: | 2019-05-31 |
公开(公告)号: | CN110211190B | 公开(公告)日: | 2022-11-01 |
发明(设计)人: | 秦硕;李金鹏 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
主分类号: | G06T7/80 | 分类号: | G06T7/80 |
代理公司: | 北京市铸成律师事务所 11313 | 代理人: | 邓海鸿;陈建民 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 相机 运动 参数估计 模型 训练 方法 装置 存储 介质 | ||
1.一种相机自运动参数估计模型的训练方法,其特征在于,包括:
将前后两帧图像输入到相机自运动参数估计模型,所述相机自运动参数估计模型为神经网络模型;
根据所述前后两帧图像的信息,利用所述相机自运动参数估计模型预测相机自运动参数;
利用所述预测的相机自运动参数和在所述前后两帧图像上标注的车道线的信息计算所述相机自运动参数估计模型的损失函数;
利用所述损失函数训练所述相机自运动参数估计模型;
其中,所述前后两帧图像包括第一图像和第二图像,所述第一图像是所述第二图像之前的一帧图像且所述第一图像与所述第二图像之间间隔N帧图像,其中,N是大于等于0的整数;
所述在所述前后两帧图像上标注的车道线的信息包括:在所述第一图像上标注的第一车道线的标注点和在所述第二图像上标注的第二车道线的标注点,且所述第一车道线对应于所述第二车道线;
利用所述预测的相机自运动参数和在所述前后两帧图像上标注的车道线的信息计算所述相机自运动参数估计模型的损失函数,包括:
利用所述预测的相机自运动参数和逆透视映射算法计算出所述第一车道线的标注点投影到所述第二图像上的投影点;
计算所述投影点与所述投影点在所述第二车道线上对应的标注点之间的距离,将所述距离作为所述损失函数的值。
2.根据权利要求1所述的方法,其特征在于,N的取值范围为4≥N≥0。
3.根据权利要求1所述的方法,其特征在于,利用所述预测的相机自运动参数和逆透视映射算法计算出所述第一车道线的标注点投影到所述第二图像上的投影点,包括:
利用相机坐标系和图像坐标系的变换关系,将所述第一车道线上的标注点在图像坐标系下的坐标转换为相机坐标系下的坐标;
利用所述预测的相机自运动参数和所述第一车道线上的标注点在相机坐标系下的坐标,计算所述投影点在相机坐标系下的坐标;
利用相机坐标系和图像坐标系的变换关系,将所述投影点在相机坐标系下的坐标转换为所述投影点在图像坐标系下的坐标。
4.根据权利要求1所述的方法,其特征在于,计算所述投影点与所述投影点在所述第二车道线上对应的点之间的距离,将所述距离作为所述损失函数的值,包括:
利用以下公式计算所述损失函数的值:
其中,i和j表示车道线上的标注点的索引编号;(x′i,y′i)表示所述投影点的坐标;(xj,yj)表示所述第二车道线上的标注点的坐标;xjm表示所述投影点在所述第二车道线上对应的点;Loss表示所述损失函数的值。
5.根据权利要求1至4中任一项所述的方法,其特征在于,利用所述损失函数训练所述相机自运动参数估计模型,包括:
利用随机梯度下降法对所述相机自运动参数估计模型进行训练,通过计算所述损失函数对所述相机自运动参数估计模型进行反向传播,更新所述相机自运动参数估计模型的网络参数;
在训练到所述相机自运动参数估计模型收敛的情况下,将所述相机自运动参数估计模型的网络参数固定。
6.根据权利要求1至4中任一项所述的方法,其特征在于,利用所述损失函数训练所述相机自运动参数估计模型之后,还包括:
利用训练好的所述相机自运动参数估计模型估计所述相机自运动参数。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910468496.8/1.html,转载请声明来源钻瓜专利网。