[发明专利]一种适用于复杂场景的机器人目标主动避障方法有效
申请号: | 201811050807.0 | 申请日: | 2018-09-10 |
公开(公告)号: | CN109461185B | 公开(公告)日: | 2021-08-17 |
发明(设计)人: | 黄攀峰;陈路;孟中杰;刘正雄;张夷斋;董刚奇;张帆 | 申请(专利权)人: | 西北工业大学 |
主分类号: | G06T7/73 | 分类号: | G06T7/73;G06T7/11;G06T7/80;G06T1/00 |
代理公司: | 西安通大专利代理有限责任公司 61200 | 代理人: | 徐文权 |
地址: | 710072 陕西*** | 国省代码: | 陕西;61 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 适用于 复杂 场景 机器人 目标 主动 方法 | ||
1.一种适用于复杂场景的机器人目标主动避障方法,其特征在于,包括以下步骤:
1)目标检测与分割,具体实现方法如下:
首先采用深度传感器Kinect对目标进行成像,获得光学图像xv和对应的深度图像xd;对于光学图像xv,采用Mask-RCNN算法检测图像中包含的所有物体oi,i=1,2,…,N,N表示图像中的物体总数,并采用包围盒对其进行标记,物体oi对应的包围盒为bi;同时,对于包围盒bi中的物体oi,对其进行分割,得到物体的像素级表示si,像素级si中的每一个像素点均表示该点来自于物体oi,像素级si以外的像素点均来自于背景区域;
对于每一个包围盒bi内的物体分割si,结合深度图像xd,计算其中每一像素点对应图像位置的深度信息,对所有像素点的深度信息取平均,得到当前物体与相机的相对距离d(oi):
其中,|si|表示si中所包含的像素点数目,k表示si中的每一个像素,d(k)表示像素k所对应图像位置下的深度信息;
2)目标位置关系估计;
3)路径规划。
2.根据权利要求1所述的一种适用于复杂场景的机器人目标主动避障方法,其特征在于,步骤2)的具体实现方法如下:
根据检测出的物体包围盒及其深度信息,得到当前相机视场内各物体的空间位置分布;以相机的光心作为圆心,光轴方向作为Z轴建立直角坐标系,X轴、Y轴分别与相机成像平面的水平和竖直方向平行;对于物体oi,其包围盒bi的尺寸和位置决定了其在XY平面内的坐标,其深度信息d(oi)决定了其在Z轴上坐标,因此可得oi在相机坐标系下的三维位置;将世界坐标系定义为与相机坐标系重合,得到各物体在世界坐标系下的位置。
3.根据权利要求2所述的一种适用于复杂场景的机器人目标主动避障方法,其特征在于,步骤3)的具体实现方法如下:
为了便于描述目标移动过程中相机相对于目标的位置,采用极坐标定义目标坐标系,其中,目标与相机的连线,且指向相机的方向定义为X轴,相机在以目标为球心、半径为R的半球状区域的表面移动,对于表面上的任意一点,其与目标的连线在水平面上的投影与X轴的夹角定义为旋转角,与目标的连线与水平面上投影直线的夹角定义为高低角,如此,旋转角和高低角唯一确定了相机在半球状区域上的位置。
4.根据权利要求3所述的一种适用于复杂场景的机器人目标主动避障方法,其特征在于,步骤3)的具体实现步骤如下:
3.1)旋转方向选取
在平面内,以目标中心为圆心,以R为半径形成圆形表示,将圆以18°间隔进行20等分,对于每一扇形区域,判断是否有其他目标落入其中,若有目标落入其中,该扇形区域的标识设为1,否则设为0;依次完成20个扇形区域的遍历,形成20维的向量表示;
其中,扇形区域的值为0表明该扇形区域不存在其他目标物体,若相机沿该扇形 区域的角平分线方向对目标进行成像,则不存在遮挡的情况;对于向量表示中0值分布越集中的扇形区域,沿该扇形区域角平分线方向的成像结果中存在遮挡干扰的概率越低;因此,选择向量表示中连续出现0值最多的区域,将该区域的角平分线方向与当前相机观测方向的夹角作为相机的旋转角度θ;
3.2)移动方向距离选取
对于目标物体ok,其余的障碍物表示为oi,i=1,2,…,k-1,k+1,…,N;对于每一个障碍物oi,其最优的相机移动方向定义为:
其中,xk,yk表示物体ok对应包围盒的几何中心坐标,xi,yi表示障碍物oi对应包围盒的几何中心坐标,hi,wi表示障碍物oi对应包围盒的高度和宽度,ε表示一个极小值,定义为0.001,IoU(ok,oi)表示ok与oi的交并比,|ok∩oi|表示ok与oi交集的面积,|ok∪oi|表示ok与oi并集的面积;
将各障碍物确定的移动方向叠加,得到相机的移动方向:
进一步,相机移动位置的高低角由下式计算:
φ=arctan(vc)
根据上述结果,相机移动至目标坐标系下旋转角为θ,高低角为φ的位置,并指向目标方向;在此观测位置下对目标重新进行成像,能够避开障碍物的遮挡,进而取得更好的目标成像效果。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于西北工业大学,未经西北工业大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811050807.0/1.html,转载请声明来源钻瓜专利网。