[发明专利]视觉里程计的实现方法和实现装置有效
申请号: | 201910554021.0 | 申请日: | 2019-06-25 |
公开(公告)号: | CN112129272B | 公开(公告)日: | 2022-04-26 |
发明(设计)人: | 查红彬;王欣;姜立;方奕庚 | 申请(专利权)人: | 京东方科技集团股份有限公司;北京大学 |
主分类号: | G01C11/00 | 分类号: | G01C11/00;G01C22/00 |
代理公司: | 北京银龙知识产权代理有限公司 11243 | 代理人: | 黄灿;胡影 |
地址: | 100015 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视觉 里程计 实现 方法 装置 | ||
1.一种视觉里程计的实现方法,其特征在于,包括:
建立用于表述摄像机的位置变化的第一模型函数,所述第一模型函数中采用作用在摄像机上的力表述所述摄像机的位置变化;
建立用于表述所述摄像机的朝向变化的第二模型函数,所述第二模型函数中采用所述摄像机的角速度表述所述摄像机的朝向变化;
根据所述第一模型函数、所述第二模型函数以及惯性传感器观测到的所述摄像机的加速度和角速度,得到目标函数;
对所述目标函数进行优化,得到优化后的作用在所述摄像机上的力和所述摄像机的角速度;
作用在所述摄像机上的力分解成:世界坐标系下方向和大小保持不变的力Fw,摄像机坐标系下大小保持不变的力Fb,和,世界坐标系下在时刻tu新增加的力Fu;
所述对所述目标函数进行优化,得到优化后的作用在所述摄像机上的力和所述摄像机的角速度包括:
对所述目标函数进行优化,得到一时间窗内的优化后的作用在所述摄像机上的力和所述摄像机的角速度,所述时间窗的开始时刻由Fu确定。
2.如权利要求1所述的视觉里程计的实现方法,其特征在于,所述第一模型函数为:
其中,s(t)是所述摄像机在时刻t在三维空间中的位置,ti为第i个时间窗内的开始时刻,Δt为第i个时间窗内的时刻t与ti的时间差,m为所述摄像机的质量,q(t)为所述摄像机在时刻t的朝向的四元数表示,R[q(t)]为在时刻t摄像机坐标系变换到世界坐标系下的变换矩阵。
3.如权利要求1所述的视觉里程计的实现方法,其特征在于,所述第二模型函数为:
其中,q(t)为所述摄像机在时刻t的朝向的四元数表示,ω(t)为所述摄像机在时刻t的角速度,ti为第i个时间窗内的开始时刻,Δt为第i个时间窗内的时刻t与ti的时间差,°为四元数的乘法运算。
4.如权利要求1所述的视觉里程计的实现方法,其特征在于,所述目标函数为:
其中,i为时间窗的计数值,θ为作用在所述摄像机上的力的集合,φ为所述摄像机的角速度的集合,N为第i个时间窗内的图像的帧数,k为第i个时间窗内的图像的帧的计数值,j为第k帧图像中的特征点的计数值,nk为第k帧图像中的特征点的总数,π(·)为三维点X投影到二维的函数,是重投影误差,p为三维特征点对应的二维特征点,Tcw(t)=[R(q(t)),s(t)],s(t)是所述摄像机在时刻t在三维空间中的位置,q(t)为所述摄像机在时刻t的朝向的四元数表示,R[q(t)]为在时刻t摄像机坐标系变换到世界坐标系下的变换矩阵,h为指定的权重值,ω(t)为所述摄像机在时刻t的角速度,α,β为指定数值,m为所述摄像机的质量,aimu(t)为惯性传感器在时刻t观测得到的加速度值,ωimu(t)为惯性传感器在时刻t观测得到的角速度值。
5.如权利要求1所述的视觉里程计的实现方法,其特征在于,所述对所述目标函数进行优化之后,还包括:
若优化后的Fu大于或等于指定阈值,确定新的时间窗开始,所述新的时间窗的开始时刻为tu。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于京东方科技集团股份有限公司;北京大学,未经京东方科技集团股份有限公司;北京大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910554021.0/1.html,转载请声明来源钻瓜专利网。