[发明专利]一种基于TuiGAN改进的脸谱图像风格迁移的方法有效
申请号: | 202011500334.7 | 申请日: | 2020-12-18 |
公开(公告)号: | CN112614047B | 公开(公告)日: | 2023-07-28 |
发明(设计)人: | 耿国华;冯龙;李康;马星锐;刘喆;杨雪;白涛;李启航 | 申请(专利权)人: | 西北大学 |
主分类号: | G06T3/00 | 分类号: | G06T3/00;G06N3/0464;G06N3/0475;G06N3/094 |
代理公司: | 西安众和至成知识产权代理事务所(普通合伙) 61249 | 代理人: | 强宏超 |
地址: | 710069 *** | 国省代码: | 陕西;61 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 tuigan 改进 脸谱 图像 风格 迁移 方法 | ||
1.一种基于TuiGAN改进的脸谱图像风格迁移的方法,其特征在于包括以下步骤:
步骤1:搜集两张秦腔脸谱图像,设置尺寸为512x512mm;
步骤2:使用pytorch构建原始的TuiGAN网络结构,TuiGAN中的生成器由两个完全卷积网络组成;
的第n个尺度的转换IA→IAB的实现如下:
首先,使用Φ将预处理为作为初始图像;
其中,代表的是图像A的第n次缩放的原图像,Φ是生成器中的网络结构,是通过生成器中的网络Φ生成后的图像;
然后,使用注意力模型Ω生成一个平衡图像An,该平衡图像对图像区域之间的长期和多尺度依赖性进行建模,使用注意力模型Ω将作为输入和输出An,来平衡两个扩展结果;
其中,是低尺度下网络训练生成出来的图像,Ω与Φ的网路结构相似;
最后,在通过生成的An线性组合来得到输出
其中,X表示逐像素乘法;
类似地,第n个尺度的转换IB→IBA的实现如下:
步骤3:在第n个尺度上,生成器生成一个注意图;
步骤4:对生成器的Φ与Ω添加两个卷积块,使其学习得到的特征更加明显;
步骤5:对判别器D添加两层卷积块nn.Conv2d(32,32,kernel_size=(1,1),1),使用pytorch构建更改注意力机制并且生成器和判别器的网络结构Φ与Ψ两层卷积层后的TuiGAN后网络结构,设置迭代次数,其他参数与原始的TuiGAN网络结构;
步骤6:将步骤1的两张秦腔脸谱图像传入到该网络中,设置迭代次数,其他参数保持不变,进行训练得到迁移的图像。
2.根据权利要求1所述的基于TuiGAN改进的脸谱图像风格迁移的方法,其特征在于:所述步骤4中生成器的Φ与都由原始的五个卷积块提升到了七个卷积块,Φ的第一个卷积块是nn.Conv2d(3,32,kernel_size=(1,1),1)和最后一个卷积块是nn.Conv2d(32,3,kernel_size=(1,1),1),Ω的第一个卷积块是nn.Conv2d(9,32,kernel_size=(1,1),1)和最后一个卷积块是nn.Conv2d(32,3,kernel_size=(1,1),1),其余卷积块全部是nn.Conv2d(32,32,kernel_size=(1,1),1)。
3.根据权利要求1所述的基于TuiGAN改进的脸谱图像风格迁移的方法,其特征在于:所述步骤2和步骤6中设置迭代次数为100。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于西北大学,未经西北大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011500334.7/1.html,转载请声明来源钻瓜专利网。
- 上一篇:PLC固定底板及PLC系统
- 下一篇:脱脂米糠的处理方法