[发明专利]手写文本图像生成方法、装置、电子设备和存储介质

说明书

本发明提供一种手写文本图像生成方法、装置、电子设备和存储介质，其中方法包括：获取内容图像和参考手写文本图像；基于所述参考手写文本图像所包含的参考书写风格，对所述内容图像进行风格迁移，得到目标手写文本图像，所述目标手写文本图像与所述内容图像的文本内容相同。本发明提供的手写文本图像生成方法、装置、电子设备和存储介质，有效的将参考手写文本图像的参考书写风格信息解耦出来，可以生成不同书写人的手写文本图像；另外，该方法可以生成包括多行文本的手写文本图像，相比于只能生成单个手写字符，然后进行拼接组成词或者句子的方式，有效提高了手写文本图像的生成效率和质量。

技术领域

本发明涉及图像处理技术领域，尤其涉及一种手写文本图像生成方法、装置、电子设备和存储介质。

背景技术

随着图像生成技术的发展，手写文本图像的生成受到越来越广泛的关注。手写文本图像生成方法，包括在线生成和离线生成两大类。离线生成方法相比于在线生成方法，数据获取简单，能快速获取大量数据用于手写生成。

现有的离线手写文本图像生成方法，主要是针对单个字的手写数据合成，通过给定用户手写的单个字符图像，利用生成模型学习用户的手写风格用于生成手写图像。

这种方法只能生成单个手写文字，无法生成词级别或者句子级别的文本行图像。此外，单个模型只能学习单个用户的手写风格，难以大规模应用在多个用户手写文本生成上，泛化性能差。

发明内容

本发明提供一种手写文本图像生成方法、装置、电子设备和存储介质，用以解决现有技术中只能生成单个手写文字，无法生成词级别或者句子级别的文本行图像，且泛化性能差的缺陷。

本发明提供一种手写文本图像生成方法，包括：

获取内容图像和参考手写文本图像；

基于所述参考手写文本图像所包含的参考书写风格，对所述内容图像进行风格迁移，得到目标手写文本图像，所述目标手写文本图像与所述内容图像的文本内容相同。

根据本发明提供的一种手写文本图像生成方法，所述基于所述参考手写文本图像所包含的参考书写风格，对所述内容图像进行风格迁移，得到目标手写文本图像，包括：

对所述内容图像进行内容特征提取，得到内容特征；

对所述参考手写文本图像进行书写风格特征提取，得到书写风格特征，所述书写风格特征用于表征所述参考书写风格；

基于所述内容特征和所述书写风格特征，生成所述目标手写文本图像。

根据本发明提供的一种手写文本图像生成方法，所述基于所述内容特征和所述书写风格特征，生成所述目标手写文本图像，包括：

基于所述书写风格特征，对所述内容特征进行特征迁移，得到迁移特征；

基于所述迁移特征，生成所述目标手写文本图像。

根据本发明提供的一种手写文本图像生成方法，所述基于所述书写风格特征，对所述内容特征进行特征迁移，得到迁移特征，包括：

基于多层残差网络，对所述内容特征进行特征迁移，得到迁移特征，所述多层残差网络中的各层残差网络的归一化参数基于所述书写风格特征确定。

根据本发明提供的一种手写文本图像生成方法，所述基于所述参考手写文本图像所包含的参考书写风格，对所述内容图像进行风格迁移，得到目标手写文本图像，包括：

基于手写文本图像生成模型，应用所述参考手写文本图像所包含的参考书写风格，对所述内容图像进行风格迁移，得到目标手写文本图像；

所述手写文本图像生成模型基于样本内容图像、样本手写文本图像和标签手写文本图像训练得到。