[发明专利]一种基于车载双相机系统的运动目标位置与速度估计方法在审
申请号: | 202210279319.7 | 申请日: | 2022-03-21 |
公开(公告)号: | CN114638858A | 公开(公告)日: | 2022-06-17 |
发明(设计)人: | 陈剑;张心放;熊文逸;邓建强 | 申请(专利权)人: | 浙江大学 |
主分类号: | G06T7/246 | 分类号: | G06T7/246;G06T7/285;G06T7/292;G06T7/66;G06T19/20 |
代理公司: | 杭州求是专利事务所有限公司 33200 | 代理人: | 林超 |
地址: | 310058 浙江*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 车载 相机 系统 运动 目标 位置 速度 估计 方法 | ||
1.一种基于车载双相机系统的运动目标位置与速度估计方法,其特征在于,包括以下步骤:
1)确定运动目标的多个特征点,车载双相机系统中的第一、第二相机在同一时刻对运动目标进行拍摄,分别获得第一、第二运动目标图像并分别记为第一、第二参考帧图像,并将拍摄时刻记为参考时刻,根据第一、第二参考帧图像中的多个特征点计算两个相机之间的尺度化平移向量和其中一个特征点在两个相机的参考时刻坐标系下的景深之比以及在第一相机的参考时刻坐标系下运动目标上各个特征点所在平面π的单位法向量;
2)根据两个相机之间的尺度化平移向量以及当前特征点在两个相机的参考时刻坐标系下的景深之比以及在第一相机的参考时刻坐标系下运动目标上各个特征点所在平面π的单位法向量计算当前特征点在两个相机的参考时刻坐标系下对应的景深;
3)根据当前特征点在任一相机的参考时刻坐标系下的景深,将选择的相机作为基准相机,确定当前特征点在车辆坐标系下的三维坐标;
4)在步骤1)的时刻后,基准相机再拍摄运动目标,获得实时运动目标图像,根据基准相机的参考帧图像和实时运动目标图像中的当前特征点计算实时尺度化平移向量和对应的景深比例和单位法向量,根据实时尺度化平移向量和对应的景深比例计算运动目标的实时位置;
5)根据运动目标的实时位置构造2.5D视觉特征,再根据2.5D视觉特征构造基于鲁棒误差积分的非线性观测器,利用基于鲁棒误差积分的非线性观测器对2.5D视觉特征的导数进行求解,获得2.5D视觉特征的导数的估计值,进而求解获得运动目标的实时速度。
2.根据权利要求1所述的一种基于车载双相机系统的运动目标位置与速度估计方法,其特征在于,所述步骤1)具体为:
首先确定运动目标的多个特征点,将第一、第二参考帧图像中的各个特征点进行匹配,获得对应特征点匹配对;接着基于多个特征点匹配对的坐标信息,利用单应性约束关系进行单应矩阵的计算,获得单应矩阵,再通过对单应矩阵的分解,获得两个相机分别在拍摄第一、第二参考帧图像时的位姿之间的相对平移向量t′2,1和其中一个特征点在两个相机的参考时刻坐标系下的景深之比以及在第一相机的参考时刻坐标系下运动目标上特征点所在平面π的单位法向量,根据相对平移向量计算两个相机之间的尺度化平移向量,计算公式如下:
其中,表示两个相机之间的尺度化平移向量,d′1表示参考时刻下第一相机的光心位置与运动目标上的各个特征点所在平面π之间的距离。
3.根据权利要求1所述的一种基于车载双相机系统的运动目标位置与速度估计方法,其特征在于,所述步骤2)中当前特征点在两个相机的参考时刻坐标系下对应的景深的计算公式如下:
其中,z′1(t)表示当前特征点在第一相机的参考时刻坐标系下的景深,表示两个相机之间的尺度化平移向量,Rv,2表示车辆坐标系下第二相机的旋转矩阵,tv,1表示车辆坐标系下第一相机的平移向量,tv,2表示车辆坐标系下第二相机的平移向量,n′1表示在第一相机的参考时刻坐标系下运动目标上特征点所在平面π的单位法向量,m′1表示当前特征点在第一相机参考帧图像中的归一化欧几里得坐标,z′2(t)表示当前特征点在第二相机的参考时刻坐标系下的景深,T表示对矩阵或向量的转置,α′表示当前特征点在两个相机的参考时刻坐标系下的景深之比。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浙江大学,未经浙江大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210279319.7/1.html,转载请声明来源钻瓜专利网。