[发明专利]一种基于唇语同步和神态适配效果增强的视频合成方法在审
申请号: | 202010545322.X | 申请日: | 2020-06-15 |
公开(公告)号: | CN111783566A | 公开(公告)日: | 2020-10-16 |
发明(设计)人: | 王太浩;张传锋;朱锦雷 | 申请(专利权)人: | 神思电子技术股份有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06N3/04;G06N3/08;G06T5/50;G10L25/24;G10L25/57 |
代理公司: | 济南泉城专利商标事务所 37218 | 代理人: | 赵玉凤 |
地址: | 250000 山东省济南市*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开一种基于唇语同步和神态适配效果增强的视频合成方法,本方法直接将待合成的人像和音频流整体进行编码,使用保留原始人脸信息的循环解码器网络,将变换后的抽象特征解码为图像序列,然后使用五个判别器网络根据真实图像序列对合成的图像序列进行对抗训练,使得总的重建误差达到最小。与已有的视频合成方法相比,本方法既保证了前后各帧之间人脸变化的连续性,又提高了各帧中人脸图片的清晰度,同时在唇语同步判别器和神态适配判别器的作用下,合成的视频显得更加自然,极大地增强了视觉效果的真实性。本发明在提升虚拟直播、人机交互的用户体验方面具有较高实用价值。 | ||
搜索关键词: | 一种 基于 同步 神态 效果 增强 视频 合成 方法 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于神思电子技术股份有限公司,未经神思电子技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202010545322.X/,转载请声明来源钻瓜专利网。