[发明专利]一种图像融合方法、装置及存储介质

说明书

本发明实施例公开了一种图像融合方法、装置及存储介质，本发明实施例获取待融合二维图像，并根据所述待融合二维图像中的人脸构建三维人脸模型；获取模板图像，以及获取所述模板图像中的人脸在三维空间中的旋转参数；基于所述旋转参数对所述三维人脸模型进行旋转，得到旋转后三维人脸模型；将所述旋转后人脸三维模型转换为二维人脸图像；将所述二维人脸图像与所述模板图像进行融合。该方案通过构建并旋转三维人脸模型，从而可以基于旋转后三维人脸模型得到二维人脸图像，使得二维人脸图像与模板图像中人脸的方向一致，以便将二维人脸图像中的人脸精准融合至模板图像中的人脸所在区域，提高了对图像中人脸进行融合的效果。

技术领域

本发明涉及图像处理技术领域，具体涉及一种图像融合方法、装置及存储介质。

背景技术

图像融合技术是计算机视觉中的一种关键技术，有着广泛的应用场景，例如，换脸、平均脸、疯狂变脸等深受用户喜爱，其关键技术就是人脸融合技术。

现有技术中，人脸融合主要是将包含用户人脸的人脸图像中的脸部区域，融合到包含人脸的模板图中，以替换模板图中的人脸，例如，将人脸图像中的脸部区域的像素点迁移到模板图中对应的脸部区域。该方案只有在模板图和人脸图像中的人脸方向一致(例如都是正脸或都是侧脸)的情况下才能够得到较好的融合效果，而用户拍照的人脸图像中人脸方向很难达到与模板图中一致，例如，如果让用户拍一张包含侧脸的人脸图像，试图保持与模板图中一致的侧脸姿势，则在拍照的过程中，用户侧脸的姿势和角度很难达到与模板图中的侧脸一致。而当模板图和人脸图像中的人脸方向不一致时，模板图与人脸图像中的人脸特征点会有较大偏差，只能强行进行融合。例如，当模板图中的人脸是侧脸，且人脸图像中的人脸是正脸时，由于模板图中的侧脸有部分区域是不可见的，比如被挡住一侧鼻子，而人脸图像中的所有正脸区域都会融合到模板图中，此时，模板图中的侧脸与人脸图像中的正脸之间的人脸特征点会有偏差，强行进行融合会造成扭曲和偏移等。

在对现有技术的研究和实践过程中，本发明的发明人发现，由于当需要模板图和人脸图像中的人脸方向一致时，用户提供的人脸图像中人脸方向(例如姿势和角度)很难达到与模板图保持一致，因此得到的人脸融合效果比较差。而当模板图和人脸图像中的人脸方向不一致(例如模板图中的人脸是侧脸，且人脸图像中的人脸是正脸)时，强行进行融合会造成扭曲和偏移等误差，导致人脸融合效果非常差。

发明内容

本发明实施例提供一种图像融合方法、装置及存储介质，旨在提高对图像中人脸进行融合的效果。

为解决上述技术问题，本发明实施例提供以下技术方案：

一种图像融合方法，包括：

获取待融合二维图像，并根据所述待融合二维图像中的人脸构建三维人脸模型；

获取模板图像，以及获取所述模板图像中的人脸在三维空间中的旋转参数；

基于所述旋转参数对所述三维人脸模型进行旋转，得到旋转后三维人脸模型；

将所述旋转后人脸三维模型转换为二维人脸图像；

将所述二维人脸图像与所述模板图像进行融合。

一种图像融合装置，包括：

构建单元，用于获取待融合二维图像，并根据所述待融合二维图像中的人脸构建三维人脸模型；

获取单元，用于获取模板图像，以及获取所述模板图像中的人脸在三维空间中的旋转参数；

旋转单元，用于基于所述旋转参数对所述三维人脸模型进行旋转，得到旋转后三维人脸模型；

转换单元，用于将所述旋转后人脸三维模型转换为二维人脸图像；

融合单元，用于将所述二维人脸图像与所述模板图像进行融合。