[发明专利]减少立体深度传感器成像中的纹理化IR图案有效
申请号: | 201811108232.3 | 申请日: | 2018-09-21 |
公开(公告)号: | CN109660782B | 公开(公告)日: | 2022-08-16 |
发明(设计)人: | 安德斯·格劳内-杰普森 | 申请(专利权)人: | 索尼公司 |
主分类号: | H04N13/122 | 分类号: | H04N13/122;H04N13/15;H04N13/257;H04N13/271 |
代理公司: | 北京信慧永光知识产权代理有限责任公司 11290 | 代理人: | 陈桂香;曹正建 |
地址: | 日本*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 减少 立体 深度 传感器 成像 中的 纹理 ir 图案 | ||
1.一种成像设备,包括:
红外(IR)投影仪,将IR纹理图案投影到场景上;
第一图像传感器,基于包括所述IR纹理图案的投影的所述场景的图像捕获来生成原始输入图像数据,其中,所述原始输入图像数据包括来自所述IR纹理图案的IR纹理图案残差;以及
图像信号处理器,被耦合到所述第一图像传感器,所述图像信号处理器接收所述原始输入图像数据,并将颜色校正变换应用于所述原始输入图像数据或对应于所述原始输入图像数据的图像数据以生成输出图像数据,其中,所述颜色校正变换校正所述IR纹理图案残差以使得所述输出图像数据相对于所述原始输入图像数据具有减少的IR纹理图案残差。
2.根据权利要求1所述的成像设备,其中,所述图像信号处理器还将第二颜色校正变换应用于所述原始输入图像数据或对应于所述原始输入图像数据的所述图像数据以生成IR纹理输出图像数据,其中,所述第二颜色校正变换将所述IR纹理图案残差保留在所述IR纹理输出图像数据内,并且所述输出图像数据相对于所述IR纹理输出图像数据具有减少的IR纹理图案残差。
3.根据权利要求2所述的成像设备,其中,所述IR纹理输出图像数据内的多个像素位置包括所述IR纹理图案残差,并且其中,所述输出图像数据包括在所述IR纹理输出图像数据内的所述多个像素位置处具有第一平均亮度的所述IR纹理输出图像数据、以及在所述输出图像数据内的相同的多个像素位置处具有第二平均亮度的所述输出图像数据,其中所述第二平均亮度小于所述第一平均亮度。
4.根据权利要求2所述的成像设备,其中,所述颜色校正变换在所述图像信号处理器的第一图像处理流水线中实现,并且所述第二颜色校正变换在所述图像信号处理器的第二图像处理流水线中实现。
5.根据权利要求2所述的成像设备,还包括:
第二图像传感器,基于具有所述IR纹理图案的投影的所述场景的第二图像捕获来生成第二原始输入图像数据,其中,所述第二原始输入图像数据包括来自所述IR纹理图案的第二IR纹理图案残差,并且其中,所述第一图像传感器和所述第二图像传感器相对于所述场景被水平对齐。
6.根据权利要求5所述的成像设备,还包括:
处理器,被耦合到所述图像信号处理器,所述处理器基于对应于所述原始输入图像数据的所述IR纹理输出图像数据和对应于所述第二原始输入图像数据的第二IR纹理图像数据来生成深度图。
7.根据权利要求6所述的成像设备,其中,所述处理器生成所述深度图包括所述处理器基于所述IR纹理图像和所述第二IR纹理图像来执行立体图像匹配。
8.根据权利要求5所述的成像设备,其中,所述图像信号处理器还接收所述第二原始输入图像数据,并将所述颜色校正变换应用于所述第二原始输入图像数据或对应于所述第二原始输入图像数据的图像数据以生成第二输出图像数据。
9.根据权利要求1所述的成像设备,其中,所述图像信号处理器应用所述颜色校正变换包括:所述图像信号处理器将所述颜色校正变换应用于所述原始输入图像数据或对应于所述原始输入图像数据的图像数据的多个子像素信号以生成所述输出图像数据的相应的单个像素,其中,所述子像素信号包括至少一个红色子像素信号值、至少一个绿色子像素信号值、以及至少一个蓝色子像素信号值。
10.根据权利要求9所述的成像设备,其中,所述多个子像素信号包括单个红色子像素信号值、两个绿色子像素信号值和单个蓝色子像素信号值,并且所述输出图像数据的单个像素包括红色像素值、绿色像素值和蓝色像素值。
11.根据权利要求1所述的成像设备,其中,所述第一图像传感器包括其上具有红-绿-蓝滤色器阵列的互补金属氧化物半导体(CMOS)传感器,并且所述图像信号处理器包括专用集成电路(ASIC)。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于索尼公司,未经索尼公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811108232.3/1.html,转载请声明来源钻瓜专利网。
- 上一篇:图像辅助曝光处理方法、装置及电子设备
- 下一篇:虚拟现实视差校正