[发明专利]对图像执行对象照明操纵的方法和装置

权利要求书

1.一种对第一图像执行对象照明操纵操作的方法，所述方法包括：

接收所述第一图像和光方向输入；

生成具有从所述第一图像检测到的第一对象的第二图像；

基于所述光方向确定所述第二图像的第二对象照明；以及

用所述第二对象照明替换所述第一图像的第一对象照明。

2.根据权利要求1所述的方法，其中确定所述第二对象照明包括：

将通用3D网格拟合到所述第二图像中的第二对象；以及

基于所述光方向和所述第二对象生成所述第二对象照明。

3.根据权利要求2所述的方法，其中确定所述第二对象照明还包括：

调整所述第二对象照明的尺寸以对应于所述第二图像的尺寸；

在调整了所述第二对象照明的尺寸之后，基于所述第二图像的亮度和色彩调节所述第二对象照明；以及

在调节了所述第二对象照明之后，使所述第二对象照明平滑化。

4.根据权利要求3所述的方法，其中调节所述第二对象照明包括：

计算所述第二对象照明的Y、U和V直方图；

计算所述第二图像的Y、U和V直方图；

使所述第二对象照明的U和V直方图与所述第二图像的U和V直方图均衡化；

利用所述第二图像和所述第二对象照明的Y直方图调节所述第二对象照明；以及

将所述第二对象照明和所述第二图像的经均衡化的U和V直方图应用于所述第二对象照明。

5.根据权利要求1所述的方法，其中替换所述第一对象照明包括：

基于所述第一对象和来自所述第二图像的阴影，从对象表面掩模检测斑点；

基于所述斑点，生成λ图，所述λ图表示与最大平滑化相对应的至少一个区域、与最小平滑化相对应的至少一个区域以及与从所述最大平滑化到所述最小平滑化的范围内的平滑化相对应的零个或多个区域；以及

利用所述λ图提取实际对象照明。

6.根据权利要求5所述的方法，其中提取所述实际对象照明包括：将具有所述λ图的特征导向的快速全局平滑化FGS滤波器应用于所述第二图像，以生成所述实际对象照明。

7.根据权利要求5所述的方法，还包括：

基于所述第一对象生成对象掩模；

根据所述对象掩模和所述第二图像估计色彩因数；以及

基于所述色彩因数找到对象表面区域。

8.根据权利要求7所述的方法，其中替换所述第一对象照明包括：

在所述对象表面掩模上执行稳定的FGS，以获得对象表面平滑掩模。

9.根据权利要求8所述的方法，其中替换所述第一对象照明还包括：

基于所述第一图像中的所述第一对象的特征估计对象检测失败的概率；以及

基于所述对象表面平滑掩模和所述对象检测失败的概率，将所述第一图像恢复到所述第一对象照明。

10.根据权利要求5所述的方法，

其中所述第一对象是脸部，

其中所述第一对象的表面是脸部皮肤，并且

其中所述斑点包括眉毛、眼睛、鼻子或嘴巴中的至少一个。

11.一种用于对第一图像执行对象照明操纵操作的设备，所述设备包括：

输入接口，被配置成接收所述第一图像和光方向输入；以及

处理器，被配置成：

生成具有从所述第一图像检测到的第一对象的第二图像；

基于所述光方向确定所述第二图像的第二对象照明；以及

用所述第二对象照明替换所述第一图像的第一对象照明。

12.根据权利要求11所述的设备，其中所述处理器还被配置成：

将通用3D网格拟合到所述第二图像中的第二对象，以及

通过使用所述光方向和所述第二对象获得所述第二对象照明。