[发明专利]一种基于GAN的动漫绘画辅助创作方法

摘要

本发明公开了一种基于GAN的动漫绘画辅助创作方法，利用基于生成对抗网络与强化学习的线稿专业增强技术、基于相关类属学习与颜色聚类的线稿上色技术和基于视听联觉与情感计算的动漫音乐相册生成等技术，构建一体化动漫绘画辅助创作系统，提升了用户的创作体验与艺术审美。

主权项

1.一种基于GAN的动漫绘画辅助创作方法，其特征在于，包括：步骤a:将非专业线稿进行图像增强，得到专业线稿；针对非专业线稿，利用生成器G和多尺度判别器进行对抗学习得到专业线稿，利用判别器D对专业线稿进行条件判别,得到生成器G中策略梯度损失函数中的生成状态分布,同时判别器D连接全连接层FC层构建交并比IOU评价网络，得到生成器G中策略梯度损失函数中的Reward；步骤b:对步骤a生成的专业线稿上色；包括：利用真彩色图和专业线稿生成灰度图和颜色聚类图，基于对抗网络生成最终的彩色图；对生成最终的彩色图进行评价；步骤c:生成动漫音乐相册，包括：动漫情感上色：使动漫颜色配色方案与情感相关联，根据输入的情感标签随机生成对应的颜色提示，利用对抗网络GAN生成彩色图像；动漫歌曲情感识别：使动漫歌曲段落与情感相关联，得到动漫歌曲段落与情感关联模型，对模型进行泛化能力测试；基于节奏识别的相册动画生成：先对音频信号进行抽值，采用对抗网络GAN估计功率谱，找到重音或者其谐波在乐曲中的频率，据此来控制图像转场和变换的频率。