[发明专利]双目视觉立体匹配方法、装置、电子设备及存储介质有效
申请号: | 202011583739.1 | 申请日: | 2020-12-28 |
公开(公告)号: | CN112784874B | 公开(公告)日: | 2022-07-22 |
发明(设计)人: | 陈海波;罗艳 | 申请(专利权)人: | 深兰人工智能芯片研究院(江苏)有限公司 |
主分类号: | G06K9/62 | 分类号: | G06K9/62;G06T5/00;G06V10/74 |
代理公司: | 北京路浩知识产权代理有限公司 11002 | 代理人: | 程琛 |
地址: | 213000 江苏省常州市武进*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 双目 视觉 立体 匹配 方法 装置 电子设备 存储 介质 | ||
1.一种双目视觉立体匹配方法,其特征在于,包括:
获取左图像和右图像;
分别以所述左图像和所述右图像为参考图,基于所述左图像和所述右图像中的待匹配区域之间的相关系数,确定在各个视差值下的第一初始匹配代价矩阵和第二初始匹配代价矩阵;
采用包滤波器分别对在各个视差值下的第一初始匹配代价矩阵和第二初始匹配代价矩阵进行代价聚合,得到在各个视差值下的第一聚合匹配代价矩阵和第二聚合匹配代价矩阵;
分别基于在各个视差值下的第一聚合匹配代价矩阵和第二聚合匹配代价矩阵,计算出第一初始视差图和第二初始视差图;
采用线性差值分别对所述第一初始视差图和所述第二初始视差图中每一像素点的视差值进行亚像素级别处理,得到第一中间视差图和第二中间视差图;
对所述第一中间视差图和所述第二中间视差图进行一致性校正,得到最终视差图;
在任一视差值下的第一初始匹配代价基于如下公式确定:
CostL(i,j,d)=1-r(LM*M(i,j),RM*M(i,j-d))
式中,CostL(i,j,d)为以所述左图像为参考图,像素点(i,j)在视差值d下的第一初始匹配代价,LM*M(i,j)为以所述左图像中像素点(i,j)为中心的M*M的区域,RM*M(i,j-d)为所述右图像中像素点(i,j-d)为中心的M*M的区域,r(LM*M(i,j),RM*M(i,j-d))为LM*M(i,j)与RM*M(i,j-d)之间的相关系数,d={1,2,3,......,DSR},DSR为预先设定的视差最大值;
在任一视差值下的第二初始匹配代价是基于如下公式确定:
CostR(i,j,d)=1-r(LM*M(i,j+d),RM*M(i,j))
式中,CostR(i,j,d)为以所述右图像为参考图,像素点(i,j)在视差值d下的第二初始匹配代价,LM*M(i,j+d)为以所述左图像中像素点(i,j+d)为中心的M*M的区域,RM*M(i,j)为所述右图像中像素点(i,j)为中心的M*M的区域,r(LM*M(i,j+d),RM*M(i,j))为LM*M(i,j+d)与RM*M(i,j)之间的相关系数。
2.根据权利要求1所述的双目视觉立体匹配方法,其特征在于,所述采用线性差值分别对所述第一初始视差图和所述第二初始视差图中每一像素点的视差值进行亚像素级别处理,得到第一中间视差图和第二中间视差图,包括:
基于在与所述第一初始视差图中每一像素点的视差值数值相邻的视差值下对应像素点的第一聚合匹配代价,对所述第一初始视差图中每一像素点的视差值进行亚像素级别处理,得到所述第一中间视差图;
基于在与所述第二初始视差图中每一像素点的视差值数值相邻的视差值下对应像素点的第二聚合匹配代价,对所述第二初始视差图中每一像素点的视差值进行亚像素级别处理,得到所述第二中间视差图。
3.根据权利要求2所述的双目视觉立体匹配方法,其特征在于,所述第一中间视差图中每一像素点的视差值基于如下公式确定:
其中,为所述第一中间视差图中像素点(i,j)的视差值,为所述第一初始视差图中像素点(i,j)的视差值,为像素点(i,j)在视差值为下的第一聚合匹配代价,为像素点(i,j)在视差值为下的第一聚合匹配代价,为像素点(i,j)在视差值为下的第一聚合匹配代价;
所述第二中间视差图中每一像素点的视差值基于如下公式确定:
其中,为所述第二中间视差图中像素点(i,j)的视差值,为所述第二初始视差图中像素点(i,j)的视差值,为像素点(i,j)在视差值为下的第二聚合匹配代价,为像素点(i,j)在视差值为下的第二聚合匹配代价,为像素点(i,j)在视差值为下的第二聚合匹配代价。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深兰人工智能芯片研究院(江苏)有限公司,未经深兰人工智能芯片研究院(江苏)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011583739.1/1.html,转载请声明来源钻瓜专利网。