[发明专利]用于主动立体深度感测的系统和方法在审
申请号: | 201880033325.6 | 申请日: | 2018-07-25 |
公开(公告)号: | CN110785788A | 公开(公告)日: | 2020-02-11 |
发明(设计)人: | 阿达尔什·普拉卡什·穆尔蒂·寇德莱;弗拉迪米尔·坦科维奇;唐丹航;塞姆·克斯金;乔纳森·詹姆斯·泰勒;菲利普·戴维森;沙赫拉姆·伊扎迪;肖恩·法内洛;朱利安·帕斯卡尔·克里斯多佛·瓦伦汀;克里斯多佛·雷曼;窦明松;萨姆赫·卡米斯;戴维·金 | 申请(专利权)人: | 谷歌有限责任公司 |
主分类号: | G06T7/521 | 分类号: | G06T7/521;G06T7/593 |
代理公司: | 11219 中原信达知识产权代理有限责任公司 | 代理人: | 李佳;邓聪惠 |
地址: | 美国加利*** | 国省代码: | 美国;US |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 补片 深度图像 时间图像 处理器 二进制代码 电子装置 匹配成本 深度图 视差图 匹配 切面 彼此偏移 成本函数 立体图像 深度相机 像素偏移 照明图案 决策树 照明器 子像素 最小化 脉冲 细化 捕获 相机 曝光 转换 优化 学习 | ||
1.一种方法,包括:
在第一时间期间在电子装置[305]的照明器[119]处将第一照明图案[100]投影到所述电子装置的环境中,以及在第二时间期间将第二照明图案[310]投影到所述电子装置的所述环境中;
在所述第一时间期间在所述电子装置的深度相机[114]处捕获所述环境的第一深度图像[410],以及在所述第二时间期间捕获所述环境的第二深度图像[415];
在所述电子装置的处理器[220]处计算所述第一深度图像、所述第二深度图像和紧接在捕获所述第一深度图像之前捕获到的一个或多个深度图像的对应部分的匹配成本,其中,所述对应部分中的每一个包括所述深度图像的多个像素;以及
基于所述匹配成本来识别所述第一深度图像和所述第二深度图像的所述对应部分以生成视差图,所述视差图指示所述第一深度图像和所述第二深度图像的所述对应部分的像素之间的视差;以及
基于所述视差图来估计所述环境的深度图。
2.根据权利要求1所述的方法,其中,所述第二照明图案与所述第一照明图案不同。
3.根据权利要求1所述的方法,还包括:使所述第二照明图案相对于所述第一照明图案旋转。
4.根据权利要求1所述的方法,其中,所述照明器包括垂直腔面发射激光器(VCSEL)。
5.根据权利要求1所述的方法,还包括:在时间上改变所述第一照明图案和所述第二照明图案。
6.根据权利要求1所述的方法,还包括:通过识别像素有效的概率并且拒绝具有低于阈值的识别到的有效性概率的像素,来细化所述视差图中的所述视差以估计所述深度图。
7.根据权利要求6所述的方法,其中,识别像素有效的概率包括:基于决策树来识别所述像素有效,所述决策树对所述像素的在空间上相邻的像素进行稀疏采样。
8.根据权利要求1所述的方法,还包括:基于将抛物线拟合到每个像素的所述视差来细化所述对应部分中的所述视差。
9.一种方法,包括:
在电子装置[100]的第一照明器[119]处以第一相位和第一频率将第一照明图案[305]脉冲到所述电子装置的环境中;
在所述电子装置的第二照明器[118]处以第二相位和所述第一频率将第二照明图案[310]脉冲到所述电子装置的所述环境中;
在所述电子装置的第一深度相机[114]处以所述第一相位和所述第一频率捕获所述环境的第一系列深度图像;
在所述电子装置的第二深度相机[116]处以所述第二相位和所述第一频率捕获所述环境的第二系列深度图像;
在所述电子装置的处理器[220]处将所述第一系列深度图像中的第一深度图像[410]的第一补片[430]与所述第二系列深度图像中的第二深度图像[415]的第二补片[432]和紧接在所述第一深度图像之前捕获到的一个或多个深度图像中的每一个深度图像的至少一个补片进行比较,其中,每个补片包括多个像素;
针对所比较的补片计算成本函数;
基于所述成本函数来生成视差图,所述视差图指示所述第一深度图像和所述第二深度图像的对应补片的对应像素之间的视差;以及
细化所述视差图的所述视差以生成所述环境的估计深度图。
10.根据权利要求9所述的方法,还包括:在时间上改变所述第一照明图案和所述第二照明图案。
11.根据权利要求9所述的方法,还包括:使所述第二照明图案相对于所述第一照明图案旋转。
12.根据权利要求9所述的方法,还包括:通过识别像素有效的概率并且拒绝具有低于阈值的识别到的有效性概率的像素来细化所述对应像素中的所述视差。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于谷歌有限责任公司,未经谷歌有限责任公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201880033325.6/1.html,转载请声明来源钻瓜专利网。
- 上一篇:用于医学成像的系统和方法
- 下一篇:图像处理装置、图像处理方法和程序