[发明专利]一种基于深度学习的立体匹配方法有效
申请号: | 201710764319.5 | 申请日: | 2017-08-30 |
公开(公告)号: | CN107590831B | 公开(公告)日: | 2021-02-05 |
发明(设计)人: | 李宏亮;董蒙;孙玲;张文海;翁爽 | 申请(专利权)人: | 电子科技大学 |
主分类号: | G06T7/593 | 分类号: | G06T7/593;G06T7/30;G06K9/62;G06N3/04 |
代理公司: | 电子科技大学专利中心 51203 | 代理人: | 邹裕蓉 |
地址: | 611731 四川省成*** | 国省代码: | 四川;51 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 深度 学习 立体 匹配 方法 | ||
1.一种基于深度学习的立体匹配方法,其特征在于,包括以下步骤:
1)将输入尺寸为W*H的左视图image1与右视图image2作为两路数据输入到深度学习网络分别进行特征提取得到代价体,W为视图宽,H为视图的高:
1-1)对左视图image1、右视图image2分别进行一次卷积及一次池化,得到各自的特征谱pool1;
1-2)对特征谱pool1进行一次卷积及一次池化,得到特征谱pool2;
1-3)对特征谱pool2进行一次带孔洞的卷积操作得到特征谱conv3;对特征谱conv3进行一次带孔洞的卷积操作得到特征谱conv4,在通道数的维度上合并特征谱conv3和特征谱conv4,并对合并结果进行卷积操作得到特征谱conv5;
1-4)将从左视图得到的特征谱conv5_left和从右视图得到的特征谱conv5_right在范围D/4内进行合并,得到D/4个合并结果concat[1]到concat[D/4],D为预设的视差搜索范围;
1-5)将得到的D/4个合并结果concat[1]到concat[D/4]分别进行1*1的卷积操作得到特征谱conv6,对特征谱conv6做11*11的卷积得到特征谱conv7,对特征谱conv7做1*1的卷积得到特征谱conv8;
1-6)特征谱conv8经回归模型softmax分类器得到一个W/4*H/4*2的分类结果;分类结果中每个点对应的两个结果为匹配成功的概率及匹配失败的概率,保留分类结果中每个点对应的匹配失败的概率,将D/4个分类结果合并成一个W/4*H/4*D/4的代价体C3;
2)将左视图image1、右视图image2的差的绝对值作为一个W*H*D的代价体C1;将左、右图像得到的特征谱pool1_left和pool1_right的差的绝对值作为一个W/2*H/2*D/2的代价体C2,最后将代价体C3、C2与C1合并得到最终的代价体C;
3)根据代价体C用胜者为王WTA策略寻找最佳匹配点,得到初始视差图;最后利用左视图作为引导图像对初始视差图进行引导滤波,得到最终的精确视差图。
2.如权利要求1所述方法,其特征在于,代价体C3、C2与C1合并得到代价体C的具体方法为:
C=μ1C1+μ2C2+μ3C3
其中,μ1、μ2、μ3均为控制权值,μ3=20,μ1=1,μ2=1。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于电子科技大学,未经电子科技大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710764319.5/1.html,转载请声明来源钻瓜专利网。
- 上一篇:印刷包装设备纸张引导装置
- 下一篇:一种纸箱堆码机收纸机构