[发明专利]基于构件分解的视频人脸幻构方法及装置

摘要

本发明公开一种基于构件分解的视频人脸幻构方法及装置，能够提高低分辨率人脸视频的人脸幻构的性能。所述方法包括：对于待进行人脸幻构的低分辨率人脸视频的每一帧图像，将该帧图像中的人脸部分按照人脸结构进行分解，并将分解得到的各个人脸部分分割成图像块；对于分割得到的每一个图像块，从预设的图像块库中获取该图像块的预设数量个最近邻图像块；对于所述低分辨率人脸视频的每一帧图像，利用所述最近邻图像块，采用基于局部约束的邻域嵌入的方法重建该帧图像分割得到的所述图像块，得到高分辨率图像块，通过将所述高分辨率图像块合并得到目标高分辨率图像；将各个目标高分辨率图像进行合并，得到目标高分辨率人脸视频。

主权项

1.一种基于构件分解的视频人脸幻构方法，其特征在于，包括：对于待进行人脸幻构的低分辨率人脸视频的每一帧图像，将该帧图像中的人脸部分按照人脸结构进行分解，并将分解得到的各个人脸部分分割成图像块；对于分割得到的每一个图像块，从预设的图像块库中获取该图像块的预设数量个最近邻图像块，其中，所述图像块库中包括组成高低分辨率人脸图像对中人脸部分各个人脸结构的图像块，组成同一人脸结构的图像块的大小相同，且与所述人脸部分中该人脸结构分割得到的图像块的大小相同，所述最近邻图像块为所述图像块库中的低分辨率图像块；对于所述低分辨率人脸视频的每一帧图像，利用所述最近邻图像块，采用基于局部约束的邻域嵌入的方法重建该帧图像分割得到的所述图像块，得到高分辨率图像块，通过将所述高分辨率图像块合并得到目标高分辨率图像；将各个目标高分辨率图像进行合并，得到目标高分辨率人脸视频；其中，所述从预设的图像块库中获取该图像块的预设数量个最近邻图像块，包括：对于该图像块采用光流的方法从所述低分辨率人脸视频的两帧图像分割得到的图像块中获取对应位置的图像块和其中，所述图像块所属的图像为该图像块所属的图像X_t的前一帧图像，所述图像块所属的图像为该图像块所属的图像X_t的后一帧图像；根据距离公式，计算该图像块在所述图像块库中的K个最近邻图像块所述距离公式为其中，为图像块和图像块x^c之间的欧几里得距离，η为常数，为所述图像块库中的图像块，j∈{1,2,…,K}。