[发明专利]一种视频修复方法和系统有效
申请号: | 202010264260.5 | 申请日: | 2020-04-07 |
公开(公告)号: | CN111614996B | 公开(公告)日: | 2022-03-18 |
发明(设计)人: | 赵玉良;郭玉峰;黄鑫;何林晋;吴昌猛;王连杰;张博伦 | 申请(专利权)人: | 上海推乐信息技术服务有限公司 |
主分类号: | H04N21/44 | 分类号: | H04N21/44;H04N21/234;H04N21/233;H04N21/439;G06T5/00 |
代理公司: | 北京东方亿思知识产权代理有限责任公司 11258 | 代理人: | 贺琳 |
地址: | 201802 上海市嘉*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 视频 修复 方法 系统 | ||
本发明涉及一种视频修复方法和系统,其中,所述方法包括:分离待修复视频的视频和音频,其中,所述待修复视频中包括附加内容;对所述视频进行切帧处理,得到多个视频帧;对所述多个视频帧进行目标检测以获取附加内容信息;获取匹配的图像信息,并以所述图像信息填充所述附加内容所在图像区域;以及将已填充完的视频帧和分离出来的音频合成为已修复视频。本发明在恢复原视频时,无需人工操作,去除效果好,效率高。
技术领域
本发明涉及一种视频处理技术领域,特别地涉及一种消除已添加附加内容的视频修复方法和系统。
背景技术
在视频应用领域中,随着视频编辑技术的发展,允许向视频增加一些附加内容而得到合成视频。例如,可以在视频中增加文字、图像等静态信息,也可以在视频中增加动画等动态信息。然而,合成视频中的广告、贴片等无关信息却经常是令人反感的。因此,有时候需要从合成视频中消除这些附加内容。虽然现有技术中有一些工具提供了去除这些附加内容的功能,但是这些工具通常都要借助人工操作,例如,人工选择操作区域、人工识别附加内容等,不但过程繁琐,而且费时费力。
发明内容
针对现有技术中存在的技术问题,本发明提出了一种视频修复方法和系统,用以自动从待修复视频中去除作为附加内容的静态信息或动态信息,恢复原视频,无需人工操作。
为解决上述技术问题,根据本发明的一个方面,本发明提供一种视频修复方法,其中包括以下步骤:
分离待修复视频的视频和音频,其中,所述待修复视频中包括附加内容;
对所述视频进行切帧处理,得到多个视频帧;
对所述多个视频帧进行目标检测以获取附加内容信息;
获取匹配的图像信息,并以所述图像信息填充所述附加内容所在图像区域;以及
将已填充完的视频帧和分离出来的音频合成为已修复视频。
为解决上述技术问题,根据本发明的另一个方面,本发明提供了一种视频修复系统,所述系统包括分离模块、切帧模块、检测模块、填充模块和合成模块,其中,所述分离模块,经配置以分离待修复视频的视频和音频,其中,所述待修复视频中具有附加内容;所述切帧模块与所述分离模块相连接,经配置将分离后的视频切分为多个视频帧;所述检测模块与所述切帧模块相连接,经配置对所述多个视频帧进行目标检测,以得到附加内容信息;所述填充模块与所述检测模块相连接,经配置以获取匹配的图像信息,并以所述图像信息填充所述合附加内容所在的图像区域;所述合成模块与所述填充模块相连接,经配置以将已填充完的视频帧和分离出来的音频合成为已修复视频。
本发明可以自动从待修复视频中去除另外填加的附加内容,如文字、图像、动画等,从而恢复原视频,整个修复过程无需人工操作,修复效果好,效率高。
附图说明
下面,将结合附图对本发明的优选实施方式进行进一步详细的说明,其中:
图1是根据本发明的一个实施例提供的视频修复方法的流程图;
图2是根据本发明的一个实施例中选取匹配图像信息填充合成视频帧中的填充区域的流程图;
图3是根据本发明的一个实施例的编码器的架构图;
图4是根据本发明的一个实施例的根据注意力机制的图像填充流程图;
图5是根据本发明的一个实施例的解码器的架构图;
图6是根据本发明的一个实施例的根据模板矫正附加内容的流程图;
图7是根据本发明的一个实施例的确定附加内容类别的流程图;
图8是根据本发明的一个实施例的视频修复系统的原理框图;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海推乐信息技术服务有限公司,未经上海推乐信息技术服务有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010264260.5/2.html,转载请声明来源钻瓜专利网。