[发明专利]图像处理方法及装置

权利要求书

1.一种图像处理方法，其特征在于，包括：

获取待处理图像和需要嵌入的动漫视频；

对所述待处理图像进行语义分割，得到具有语义类别的局部特征图像；

基于所述动漫视频的风格，按照所述局部特征图像的所述语义类别输入至对应的风格迁移模型，得到局部动漫化的风格图像；

对所述局部动漫化的风格图像进行融合得到动漫化的风格图像；

将所述动漫化的风格图像嵌入至所述动漫视频中。

2.根据权利要求1所述的方法，其特征在于，在基于所述动漫视频的风格，所述按照所述局部特征图像的语义类别输入至对应的风格迁移模型，得到局部动漫化的风格图像之前，所述方法还包括：

获取各个语义类别的样本数据，所述样本数据包括样本图像和目标动漫化的风格图像；

将所述样本图像分别输入至所述语义类别对应的待训练的风格迁移模型，得到预测动漫化的风格图像；

依据所述预测动漫化的风格图像和所述目标动漫化的风格图像之间的差值，确定各个所述语义类别对应的所述待训练的风格迁移模型的损失值；

根据所述损失值，对所述待训练的风格迁移模型的模型参数进行调整，得到训练完成的各个所述语义类别对应的风格迁移模型。

3.根据权利要求2所述的方法，其特征在于，所述语义类别至少包括人物、物品、动物和背景的其中一种，所述人物包括特写人物。

4.根据权利要求3所述的方法，其特征在于，在所述按照所述局部特征图像的语义类别输入至对应的风格迁移模型，得到局部动漫化的风格图像之前，所述方法还包括：

获取人像样本数据，所述人像样本数据包括人像样本图像和目标人像动漫化的风格图像；

将所述人像样本图像输入至待训练的风格迁移模型，得到预测人像动漫化的风格图像，所述预测人像动漫化的风格图像为所述风格迁移模型将所述人像样本图像分割为具有对应人像语义类别的人像局部特征图像，生成各个人像语义类别对应的人像局部区域动漫化的风格图像后融合得到；

依据所述预测人像动漫化的风格图像和所述目标人像动漫化的风格图像之间的差值，确定所述待训练的风格迁移模型的损失值；

根据所述损失值，对所述待训练的风格迁移模型的模型参数进行调整，得到训练完成的人像风格迁移模型。

5.根据权利要求4所述的方法，其特征在于，所述人像语义类别至少包括头发、皮肤和衣服的其中一种。

6.根据权利要求4所述的方法，其特征在于，所述按照所述局部特征图像的语义类别输入至对应的风格迁移模型，得到局部动漫化的风格图像，包括：

当所述局部特征图像的语义类别为人物时，确定所述局部特征图像在所述待处理图像中所占的图像比例；

当所述图像比例达到预设图像比例时，确定所述局部特征图像的语义类别为特写人物，将所述局部特征图像输入至人像风格迁移模型，得到人像局部动漫化的风格图像。

7.一种图像处理装置，其特征在于，包括：

图像获取模块，用于获取待处理图像和需要嵌入的动漫视频；

语义分割模块，用于对所述待处理图像进行语义分割，得到具有语义类别的局部特征图像；

风格化处理模块，用于基于所述动漫视频的风格，按照所述局部特征图像的所述语义类别输入至对应的风格迁移模型，得到局部动漫化的风格图像；

图像融合模块，用于对所述局部动漫化的风格图像进行融合得到动漫化的风格图像；

风格图像嵌入模块，用于将所述动漫化的风格图像嵌入至所述动漫视频中。