[发明专利]双目全景图像获取方法及装置有效

专利信息
申请号: 201610621487.4 申请日: 2016-07-29
公开(公告)号: CN107666606B 公开(公告)日: 2019-07-12
发明(设计)人: 姚莉;王巨宏;黄婷婷;郑轩 申请(专利权)人: 东南大学;腾讯科技(深圳)有限公司
主分类号: H04N13/128 分类号: H04N13/128;H04N13/239;G03B37/00
代理公司: 北京三高永信知识产权代理有限责任公司 11138 代理人: 刘映东
地址: 211100 江苏省南京市江*** 国省代码: 江苏;32
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 双目 全景 图像 获取 方法 装置
【权利要求书】:

1.一种双目全景图像获取方法,其特征在于,所述方法包括:

获取通过第一全景摄像头得到的第一全景图像,以及通过第二全景摄像头得到的第二全景图像,所述第一全景摄像头与所述第二全景摄像头均水平放置;

获取至少一组相互匹配的第一像素点和第二像素点,所述第一像素点是位于所述第一全景图像上的像素点,所述第二像素点是位于所述第二全景图像上的像素点;

计算相互匹配的至少一组第一像素点和第二像素点之间的距离差值,根据所述距离差值得到所述第一全景图像的深度信息和所述第二全景图像的深度信息;

将所述第一全景图像和所述第二全景图像中的一个作为第一单眼全景图,结合与被选为所述第一单眼全景图的全景图像对应的深度信息、所述第一单眼全景图以及预定瞳距映射出第二单眼全景图;

将所述第一单眼全景图在第一单眼对应的显示区域进行显示,将所述第二单眼全景图在第二单眼对应的显示区域进行显示,所述第一单眼对应的显示区域和所述第二单眼对应的显示区域之间的中心距离与所述预定瞳距相同。

2.根据权利要求1所述的方法,其特征在于,所述方法还包括:

对所述第一全景摄像头进行单目标定,确定出所述第一全景摄像头的第一内部参数和相对于世界坐标系的第一外部参数;

对所述第二全景摄像头进行单目标定,确定出所述第二全景摄像头的第二内部参数和相对于世界坐标系的第二外部参数;

对所述第一全景摄像头和所述第二全景摄像头进行立体标定,所述立体标定是通过所述第一内部参数、所述第一外部参数、所述第二内部参数和所述第二外部参数确定出所述第一全景摄像头和所述第二全景摄像头的相对位置参数;

根据单目标定和立体标定获取到的参数计算所述第一全景摄像头和所述第二全景摄像头的旋转矩阵和平移矩阵。

3.根据权利要求2所述的方法,其特征在于,所述获取通过第一全景摄像头得到的第一全景图像,以及通过第二全景摄像头得到的第二全景图像,包括:

通过所述第一全景摄像头采集第一初始全景图像,通过所述第二全景摄像头在同时刻采集第二初始全景图像;

根据所述旋转矩阵和所述平移矩阵计算出所述第一初始全景图像的第一映射表和所述第二初始全景图像的第二映射表,所述第一映射表中存储的是所述第一初始全景图像经过所述旋转矩阵和所述平移矩阵变换前后各像素点所在坐标的对应关系,所述第二映射表中存储的是所述第二初始全景图像经过所述旋转矩阵和所述平移矩阵变换前后各像素点所在坐标的对应关系;

根据所述第一映射表对所述第一初始全景图像进行矫正,得到所述第一全景图像,根据所述第二映射表对所述第二初始全景图像进行矫正,得到所述第二全景图像,矫正后得到的第一全景图像和矫正后得到的第二全景图像中相匹配的像素点在同一水平轴上。

4.根据权利要求1所述的方法,其特征在于,所述获取至少一组相互匹配的第一像素点和第二像素点,包括:

对于所述第一全景图像中任一第一像素点,选取所述第二全景图像中与所述第一像素点对应位置处的像素点,将包含所述选取的像素点的第一预定区域内的各个像素点确定为候选像素点;

在所述第一全景图像中以所述第一像素点为中心点选取预定大小的第一区域;

对于每个候选像素点,在所述第二全景图像中以所述候选像素点为中心点选取所述预定大小的第二区域;

对于每个第二区域,计算所述第二区域的像素点与所述第一区域内对应位置处的像素点之间的像素差值,将各个像素差值的绝对值求和;

将绝对值之和最小的第二区域所对应的候选像素点,确定为与所述第一像素点匹配的第二像素点。

5.根据权利要求4所述的方法,其特征在于,在所述将绝对值之和最小的第二区域所对应的候选像素点,确定为与所述第一像素点匹配的第二像素点之后,所述方法还包括:

对于确定出的每组中的第一像素点和第二全景图像中的第二像素点,在所述第一全景图像中确定出与所述第二像素点匹配度最高的像素点,在所述像素点为确定出的与所述第二像素点匹配的所述第一像素点时,将所述第一像素点和所述第二像素点作为相互匹配的一组像素点进行存储。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于东南大学;腾讯科技(深圳)有限公司,未经东南大学;腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201610621487.4/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top