[发明专利]图像处理装置及图像处理方法

说明书

根据本发明实施例的、图像处理装置的图像处理方法包括以下步骤：通过RGB相机获得第一RGB图像；从第一RGB图像中提取反射分量；通过TOF相机获得TOF IR图像；以及通过计算第一RGB图像的反射分量和TOF IR图像获得第二RGB图像，其中，TOF IR图像是从对于四个相位的IR图像生成的幅度图像或强度图像。

技术领域

本发明涉及一种使用红绿蓝(RGB)相机和飞行时间(ToF)相机的图像处理装置及图像处理方法。

背景技术

通常安装在移动设备上的红绿蓝(RGB)相机具有如下问题：当在弱光环境下捕获图像时，由于亮度极低或噪声很大，图像质量很低。作为在弱光环境下改善RGB相机的图像质量的方法，可以使用闪光功能。然而，当使用闪光功能时，由于点亮闪光灯的短距离处的光饱和，可能难以获得自然图像。作为在弱光环境下改善RGB相机的图像质量的另一种方法，可以将红外线(IR)传感器与RGB相机一起使用。然而，由于红外线传感器，RGB颜色的灵敏度可能降低。

因此，需要在弱光环境下改善RGB相机的图像质量的新方法。

发明内容

技术问题

本发明旨在提供一种使用飞行时间(ToF)相机改善红绿蓝(RGB)相机的图像质量的图像处理方法及图像处理装置。

技术方案

本发明的一个方面提供一种图像处理装置的图像处理方法，包括：使用RGB相机获取第一RGB图像；从第一RGB图像中提取反射分量；使用ToF相机获取ToF红外线(IR)图像；以及通过计算第一RGB图像的反射分量和ToF IR图像获取第二RGB图像，其中，ToF IR图像是从对于四个相位的IR图像中生成的幅度图像或强度图像。

反射分量的提取可以包括：将第一RGB图像转换为第一色调饱和值(HSV)图像；以及从第一HSV图像的明暗度分量中获取反射分量。

反射分量可以包括第一HSV图像的明暗度分量的高频分量。

反射分量的获取可以包括：对第一HSV图像的明暗度分量执行低通滤波；从第一HSV图像的明暗度分量中获取低频分量；以及从第一HSV图像的明暗度分量中去除低频分量。

第二RGB图像的获取可以包括：计算第一RGB图像的反射分量和ToF IR图像；以及通过使用通过计算第一RGB图像的反射分量和ToF IR图像获得的结果值以及第一HSV图像的色度分量和饱和度分量来获取第二RGB图像。

图像处理方法可以进一步包括：在使用ToF相机对ToF IR图像的获取和对第二RGB图像的获取之间，对ToF IR图像进行校正。

ToF IR图像的校正可以包括：对ToF IR图像进行插值，使其具有与第一RGB图像相同的尺寸；以及对ToF IR图像的亮度进行校正。

本发明的另一方面提供一种图像处理装置，包括：RGB图像获取单元，所述RGB图像获取单元被配置为从RGB相机中获取第一RGB图像；RGB图像预处理单元，所述RGB图像预处理单元被配置为从第一RGB图像中提取反射分量；ToF图像获取单元，所述ToF图像获取单元被配置为从ToF相机中获取ToF IR图像；以及图像处理单元，所述图像处理单元被配置为通过计算第一RGB图像的反射分量和ToF IR图像来获取第二RGB图像，其中，ToF IR图像是从对于四个相位的IR图像中生成的幅度图像或强度图像。

RGB图像预处理单元可以将第一RGB图像转换为第一HSV图像，然后从第一HSV图像的明暗度分量中获取反射分量。

反射分量可以包括第一HSV图像的明暗度分量的高频分量。

RGB图像预处理单元可以对第一HSV图像的明暗度分量执行低通滤波，从第一HSV图像的明暗度分量中获取低频分量，并从第一HSV图像的明暗度分量中去除低频分量。