[发明专利]图像风格转换方法及装置

说明书

本申请公开了一种图像风格转换方法及装置。该方法包括：获取待处理图像的内容特征数据和风格图像的风格特征数据；分别对所述内容特征数据和所述风格特征数据进行映射处理，得到映射处理后的所述内容特征数据和映射处理后的所述风格特征数据；基于所述映射处理后的所述内容特征数据与所述映射处理后的所述风格特征数据，得到重组特征数据；将所述重组特征数据映射到所述风格特征数据所在域，得到转换特征数据；基于所述转换特征数据，得到风格转换图像。还公开了相应的装置。通过对待处理图像的内容特征数据和风格图像的风格特征数据进行映射、重组和转换，得到风格转换后的图像，可实现高效、通用地转换图像风格。

技术领域

本申请涉及图像处理技术领域，尤其涉及一种图像风格转换方法及装置。

背景技术

图像风格转换是指可依据用户或系统的需求将待处理图像转换成任意参考风格图像的风格。近期，许多技术将神经网络运用于图像风格转换。神经网络具有很好的语义与风格信息提取能力，因此，多数利用神经网络进行风格转换的技术，效果都优于传统的风格转换方式。

发明内容

本申请提供了一种图像风格转换方法及装置，以实现图像风格的高效、通用处理。

第一方面，提供了一种图像风格转换方法，包括：获取待处理图像的内容特征数据和风格图像的风格特征数据；分别对所述内容特征数据和所述风格特征数据进行映射处理，得到映射处理后的所述内容特征数据和映射处理后的所述风格特征数据；基于所述映射处理后的所述内容特征数据与所述映射处理后的所述风格特征数据，得到重组特征数据；将所述重组特征数据映射到所述风格特征数据所在域，得到转换特征数据；以及基于所述转换特征数据，得到风格转换图像。

在该方面中，通过对待处理图像的内容特征数据和风格图像的风格特征数据进行映射、重组和转换，得到风格转换后的图像，可实现高效、通用地转换图像风格。

在一种可能的实现方式中，所述分别对所述内容特征数据和所述风格特征数据进行映射处理，得到映射处理后的所述内容特征数据和映射处理后的所述风格特征数据，包括：将所述内容特征数据和所述风格特征数据投影到同一空间域，得到所述映射处理后的所述内容特征数据和所述映射处理后的所述风格特征数据。

在该实现方式中，由于内容特征数据和风格特征数据可能不位于同一空间域，通过将内容特征数据和风格特征数据投影到同一个空间域，实现了内容特征数据和风格特征数据的归一化处理。

在另一种可能的实现方式中，所述分别对所述内容特征数据和所述风格特征数据进行映射处理，得到映射处理后的所述内容特征数据和映射处理后的所述风格特征数据，包括：基于所述内容特征数据和所述内容特征数据的均值信息，得到第一特征数据，并且基于所述风格特征数据和所述风格特征数据的均值信息，得到第二特征数据；对所述第一特征数据进行第一卷积处理，得到所述映射处理后的所述内容特征数据，并对所述第二特征数据进行第二卷积处理，得到所述映射处理后的所述风格特征数据。

在该实现方式中，分别通过对内容特征数据和风格特征数据的均值处理、卷积处理，完成了内容特征数据和风格特征数据的映射。

在又一种可能的实现方式中，所述第一卷积处理的卷积参数是基于所述内容图像得到的，所述第二卷积处理的卷积参数是基于所述风格图像得到的。

在又一种可能的实现方式中，所述基于所述映射处理后的所述内容特征数据与所述映射处理后的所述风格特征数据，得到重组特征数据，包括：将所述映射处理后的所述内容特征数据划分成至少一个内容特征数据块，并将所述映射处理后的所述风格特征数据划分成至少一个风格特征数据块；对所述至少一个内容特征数据块和所述至少一个风格特征数据块进行匹配处理，得到所述至少一个内容特征数据块的匹配块；以及基于所述至少一个内容特征数据块的匹配块，得到所述重组特征数据。