[发明专利]用于捕获图像的方法、装置和计算机程序产品

权利要求书

1.一种方法，包括：

接收从全色图像传感器捕获的场景的全色图像；

接收从彩色图像传感器捕获的所述场景的彩色图像；以及

至少部分基于处理所述全色图像和所述彩色图像来生成所述场景的修改的图像。

2.如权利要求1所述的方法，其中生成所述修改的图像包括：

基于与全色图像关联的特征点和与所述彩色图像关联的特征点确定弯曲矩阵；

确定与所述彩色图像关联的色度分量；

使用所述弯曲矩阵，对应于所述全色图像弯曲与所述彩色图像关联的所述色度分量；以及

基于处理所述全色图像和被弯曲的所述色度分量，从所述全色图像传感器的视角生成所述修改的图像。

3.如权利要求1或2所述的方法，其中生成所述修改的图像包括：

基于与全色图像关联的特征点和与所述彩色图像关联的特征点确定弯曲矩阵；

确定与所述彩色图像关联的色度分量；

使用所述弯曲矩阵，对应于所述色度分量的视图弯曲所述全色图像；以及

基于处理所述色度分量和被弯曲的所述全色图像，从所述彩色图像传感器的视角生成所述修改的图像。

4.如权利要求1所述的方法，其中接收所述彩色图像包括执行对从所述彩色图像传感器接收的图像样本的去镶嵌以生成所述彩色图像，其中所述彩色图像采用原色格式。

5.如权利要求2或3所述的方法，其中生成所述弯曲矩阵包括：

执行对所述彩色图像的灰度转换以生成所述彩色图像的灰度图像；

通过确定与所述灰度图像关联的特征点来确定与所述彩色图像关联的所述特征点；

确定与所述全色图像关联的所述特征点；

确定与所述灰度图像关联的所述特征点和与所述全色图像关联的所述特征点之间的对应关系信息；以及

基于所述对应关系信息计算所述弯曲矩阵。

6.如权利要求2或3所述的方法，其中生成所述色度分量包括：

执行对从所述彩色图像传感器接收的图像样本的去镶嵌以生成所述彩色图像，其中所述彩色图像采用原色格式；以及

执行对所述彩色图像的分解以确定亮度分量和所述色度分量。

7.如权利要求2或6所述的方法，其中弯曲所述色度分量包括：

将所述色度分量去噪；以及

使用所述弯曲矩阵，对应于所述全色图像弯曲去噪的所述色度分量。

8.如权利要求2或3或5所述的方法，还包括：

基于与所述全色图像关联的所述特征点和与所述彩色图像关联的所述特征点确定深度图；以及

基于使用所述深度图来处理从所述全色图像传感器的所述视角的所述修改的图像和从所述彩色图像传感器的所述视角的所述修改的图像，来生成所述场景的三维图像。

9.如权利要求2或3或5所述的方法，还包括：

基于与所述全色图像关联的所述特征点和与所述彩色图像关联的所述特征点确定深度图；以及

基于处理所述彩色图像和从所述全色图像传感器的所述视角的所述修改的图像来生成所述场景的三维图像。

10.如权利要求1或2或3或7所述的方法，还包括：

在弯曲所述色度分量之前对所述彩色图像的所述色度分量进行上采样，其中所述彩色图像传感器的像素计数少于所述全色图像传感器的像素计数。

11.如权利要求10所述的方法，其中所述色度分量按照所述全色图像传感器的所述像素计数与所述彩色图像传感器的所述像素计数之比被上采样。

12.如权利要求1至11中任一项所述的方法，其中所述彩色图像是红-绿-蓝图像。

13.一种装置，包括：

至少一个处理器；以及

包括计算机程序代码的至少一个存储器，所述至少一个存储器和所述计算机程序代码被配置用于与所述至少一个处理器一起使所述装置至少执行：

接收从全色图像传感器捕获的场景的全色图像；

接收从彩色图像传感器捕获的所述场景的彩色图像；以及

至少部分基于处理所述全色图像和所述彩色图像来生成所述场景的修改的图像。