[发明专利]一种文本转贴图方法、装置、存储介质及电子设备

权利要求书

1.一种文本转贴图方法，其特征在于，所述方法包括：

获取目标文本的文本特征，绘制所述文本特征对应的场景画布；

将所述场景画布输入至卷积网络中进行场景编码，输出场景编码后的场景特征图；

基于所述文本特征以及所述场景画布，确定待绘制的目标对象；

将所述文本特征以及所述目标对象输入至第二文本关注器，输出第二文本注意力向量；

将所述场景特征图以及所述第二文本注意力向量输入至场景卷积网络中，输出第二场景注意力向量；

将所述第二场景注意力向量、所述目标对象以及所述第二文本注意力向量输入至属性卷积网络中，输出所述目标对象的属性特征；

在所述场景画布上绘制所述目标对象，并基于所述属性特征对所述目标对象进行调整，生成所述目标文本对应的贴图。

2.根据权利要求1所述的方法，其特征在于，所述获取目标文本的文本特征，绘制所述文本特征对应的场景画布，包括：

将目标文本输入至文本编码器中，输出所述目标文本对应的文本特征；

提取所述文本特征对应的场景主题，在预设的贴图索引库中索引所述场景主题对应的场景贴图，将所述场景贴图确定为场景画布。

3.根据权利要求1所述的方法，其特征在于，所述基于所述文本特征以及所述场景画布，确定待绘制的目标对象，包括：

将所述文本特征以及所述场景特征图输入至对象解码器中，输出所述目标对象。

4.根据权利要求3所述的方法，其特征在于，所述方法还包括：

获取已绘制的历史对象；

所述将所述文本特征以及所述场景特征图输入至对象解码器中，输出所述目标对象，包括：

对所述场景特征图进行池化处理，得到池化处理后的第一场景注意力向量；

将所述第一场景注意力向量、所述历史对象以及所述文本特征输入至第一文本关注器，输出第一文本注意力向量；

将所述第一场景注意力向量、所述历史对象以及所述第一文本注意力向量输入至对象卷积网络中，输出所述目标对象。

5.根据权利要求1所述的方法，其特征在于，所述在所述场景画布上绘制所述目标对象，并基于所述属性特征对所述目标对象进行调整，生成所述目标文本对应的贴图，包括：

在预设的贴图索引库中索引所述目标对象对应的贴图对象；

将所述属性特征、所述贴图对象以及所述场景画布输入至画布调整模型中，输出所述目标文本对应的贴图。

6.一种文本转贴图装置，其特征在于，所述装置包括：

场景画布绘制模块，用于获取目标文本的文本特征，绘制所述文本特征对应的场景画布；

场景特征图编码模块，用于将所述场景画布输入至卷积网络中进行场景编码，输出场景编码后的场景特征图；

目标对象确定模块，用于基于所述文本特征以及所述场景画布，确定待绘制的目标对象；

属性特征确定模块，包括：文本向量输出单元，用于将所述文本特征以及所述目标对象输入至第二文本关注器，输出第二文本注意力向量；场景向量输出单元，用于将所述场景特征图以及所述第二文本注意力向量输入至场景卷积网络中，输出第二场景注意力向量；属性特征输出单元，用于将所述第二场景注意力向量、所述目标对象以及所述第二文本注意力向量输入至属性卷积网络中，输出所述目标对象的属性特征；

贴图生成模块，用于在所述场景画布上绘制所述目标对象，并基于所述属性特征对所述目标对象进行调整，生成所述目标文本对应的贴图。

7.一种计算机存储介质，其特征在于，所述计算机存储介质存储有多条指令，所述指令适于由处理器加载并执行如权利要求1～5任意一项的方法步骤。

8.一种电子设备，其特征在于，包括：处理器和存储器；其中，所述存储器存储有计算机程序，所述计算机程序适于由所述处理器加载并执行如权利要求1～5任意一项的方法步骤。