[发明专利]一种视频处理方法、装置、电子设备及存储介质在审

专利信息
申请号: 202111257835.1 申请日: 2021-10-27
公开(公告)号: CN114007091A 公开(公告)日: 2022-02-01
发明(设计)人: 李文哲;韩殿飞;王巍;蔺颖;李凯 申请(专利权)人: 北京市商汤科技开发有限公司
主分类号: H04N21/2187 分类号: H04N21/2187;H04N21/233;H04N21/234;H04N21/2343;H04N21/235;H04N21/258;H04N21/435;H04N21/439;H04N21/44;H04N21/4402;H04N21/442;H04N21/45;G10L15/22
代理公司: 北京派特恩知识产权代理有限公司 11270 代理人: 刘晖铭;张颖玲
地址: 100080 北京市海淀区北*** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 视频 处理 方法 装置 电子设备 存储 介质
【权利要求书】:

1.一种视频处理方法,其特征在于,包括:

实时采集目标场景的场景视频,以及未处于所述目标场景的讲解者针对所述目标场景的讲解视频;

对所述讲解视频中,所述讲解者的形象进行虚拟化处理,得到虚拟视频;

将所述虚拟视频与所述场景视频进行融合,生成目标视频。

2.根据权利要求1所述的方法,其特征在于,所述对所述讲解视频中,所述讲解者的形象进行虚拟化处理,得到虚拟视频,包括:

从所述讲解视频中,分离出所述讲解者对应的讲解音频和视频图像;

对所述视频图像中,所述讲解者的形象进行虚拟化处理,得到虚拟图像;

将所述虚拟图像与所述讲解音频进行融合,生成所述虚拟视频。

3.根据权利要求2所述的方法,其特征在于,所述对所述视频图像中,所述讲解者的形象进行虚拟化处理,得到虚拟图像,包括:

根据所述视频图像中所述讲解者的形象生成对应的虚拟形象;

将所述视频图像中,所述讲解者的形象更新为所述对应的虚拟形象,得到所述虚拟图像;

或者,获取预设虚拟形象;

将所述视频图像中,所述讲解者的形象更新为所述预设虚拟形象,得到所述虚拟图像。

4.根据权利要求1-3任一项所述的方法,其特征在于,所述将所述虚拟视频与所述场景视频进行融合,生成目标视频,包括:

从所述场景视频中,分离出所述目标场景对应的场景音频和场景图像;

对所述场景音频进行优化处理,得到优化后的场景音频;

将所述优化后的场景音频、所述场景图像,以及所述虚拟视频进行融合,生成所述目标视频。

5.根据权利要求1-4任一项所述的方法,其特征在于,所述方法还包括:

对所述讲解视频中,所述讲解者对应的讲解音频进行语音识别,得到讲解文本;

对所述讲解文本进行语义自动纠错,得到纠错后的讲解文本;

所述将所述虚拟视频与所述场景视频进行融合,生成目标视频之后,所述方法还包括:

利用所述纠错后的讲解文本,对所述目标视频添加字幕。

6.根据权利要求1-5任一项所述的方法,其特征在于,所述将所述虚拟视频与所述场景视频进行融合,生成目标视频之后,所述方法还包括:

针对观看对象播放所述目标视频;

实时采集所述观看对象在观看所述目标视频期间,针对所述目标视频的反馈信息;所述反馈信息,包括所述观看对象的语音信息和图像信息中的至少一项;

利用所述反馈信息对所述观看对象进行角色分析,得到所述观看对象的角色分析结果;

基于所述角色分析结果,实时调整所述目标视频中,所述讲解者的虚拟形象。

7.根据权利要求6所述的方法,其特征在于,所述针对观看对象播放所述目标视频之后,所述方法还包括:

在接收到停止显示指令的情况下,停止显示所述目标视频中所述讲解者的虚拟形象。

8.一种视频处理装置,其特征在于,包括:

采集模块,用于实时采集目标场景的场景视频,以及未处于所述目标场景的讲解者针对所述目标场景的讲解视频;

处理模块,用于对所述讲解视频中,所述讲解者的形象进行虚拟化处理,得到虚拟视频;

融合模块,用于将所述虚拟视频与所述场景视频进行融合,生成目标视频。

9.一种电子设备,其特征在于,包括:处理器、存储器和通信总线;其中,

所述通信总线,用于实现所述处理器和所述存储器之间的连接通信;

所述处理器,用于执行所述存储器中存储的一个或多个程序,以实现权利要求1-7任一项所述的视频处理方法。

10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有一个或者多个程序,所述一个或者多个程序可以被一个或者多个处理器执行,以实现权利要求1-7任一项所述的视频处理方法。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京市商汤科技开发有限公司,未经北京市商汤科技开发有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202111257835.1/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top