[发明专利]一种视频处理方法、装置、电子设备及存储介质在审
申请号: | 202111257835.1 | 申请日: | 2021-10-27 |
公开(公告)号: | CN114007091A | 公开(公告)日: | 2022-02-01 |
发明(设计)人: | 李文哲;韩殿飞;王巍;蔺颖;李凯 | 申请(专利权)人: | 北京市商汤科技开发有限公司 |
主分类号: | H04N21/2187 | 分类号: | H04N21/2187;H04N21/233;H04N21/234;H04N21/2343;H04N21/235;H04N21/258;H04N21/435;H04N21/439;H04N21/44;H04N21/4402;H04N21/442;H04N21/45;G10L15/22 |
代理公司: | 北京派特恩知识产权代理有限公司 11270 | 代理人: | 刘晖铭;张颖玲 |
地址: | 100080 北京市海淀区北*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 视频 处理 方法 装置 电子设备 存储 介质 | ||
1.一种视频处理方法,其特征在于,包括:
实时采集目标场景的场景视频,以及未处于所述目标场景的讲解者针对所述目标场景的讲解视频;
对所述讲解视频中,所述讲解者的形象进行虚拟化处理,得到虚拟视频;
将所述虚拟视频与所述场景视频进行融合,生成目标视频。
2.根据权利要求1所述的方法,其特征在于,所述对所述讲解视频中,所述讲解者的形象进行虚拟化处理,得到虚拟视频,包括:
从所述讲解视频中,分离出所述讲解者对应的讲解音频和视频图像;
对所述视频图像中,所述讲解者的形象进行虚拟化处理,得到虚拟图像;
将所述虚拟图像与所述讲解音频进行融合,生成所述虚拟视频。
3.根据权利要求2所述的方法,其特征在于,所述对所述视频图像中,所述讲解者的形象进行虚拟化处理,得到虚拟图像,包括:
根据所述视频图像中所述讲解者的形象生成对应的虚拟形象;
将所述视频图像中,所述讲解者的形象更新为所述对应的虚拟形象,得到所述虚拟图像;
或者,获取预设虚拟形象;
将所述视频图像中,所述讲解者的形象更新为所述预设虚拟形象,得到所述虚拟图像。
4.根据权利要求1-3任一项所述的方法,其特征在于,所述将所述虚拟视频与所述场景视频进行融合,生成目标视频,包括:
从所述场景视频中,分离出所述目标场景对应的场景音频和场景图像;
对所述场景音频进行优化处理,得到优化后的场景音频;
将所述优化后的场景音频、所述场景图像,以及所述虚拟视频进行融合,生成所述目标视频。
5.根据权利要求1-4任一项所述的方法,其特征在于,所述方法还包括:
对所述讲解视频中,所述讲解者对应的讲解音频进行语音识别,得到讲解文本;
对所述讲解文本进行语义自动纠错,得到纠错后的讲解文本;
所述将所述虚拟视频与所述场景视频进行融合,生成目标视频之后,所述方法还包括:
利用所述纠错后的讲解文本,对所述目标视频添加字幕。
6.根据权利要求1-5任一项所述的方法,其特征在于,所述将所述虚拟视频与所述场景视频进行融合,生成目标视频之后,所述方法还包括:
针对观看对象播放所述目标视频;
实时采集所述观看对象在观看所述目标视频期间,针对所述目标视频的反馈信息;所述反馈信息,包括所述观看对象的语音信息和图像信息中的至少一项;
利用所述反馈信息对所述观看对象进行角色分析,得到所述观看对象的角色分析结果;
基于所述角色分析结果,实时调整所述目标视频中,所述讲解者的虚拟形象。
7.根据权利要求6所述的方法,其特征在于,所述针对观看对象播放所述目标视频之后,所述方法还包括:
在接收到停止显示指令的情况下,停止显示所述目标视频中所述讲解者的虚拟形象。
8.一种视频处理装置,其特征在于,包括:
采集模块,用于实时采集目标场景的场景视频,以及未处于所述目标场景的讲解者针对所述目标场景的讲解视频;
处理模块,用于对所述讲解视频中,所述讲解者的形象进行虚拟化处理,得到虚拟视频;
融合模块,用于将所述虚拟视频与所述场景视频进行融合,生成目标视频。
9.一种电子设备,其特征在于,包括:处理器、存储器和通信总线;其中,
所述通信总线,用于实现所述处理器和所述存储器之间的连接通信;
所述处理器,用于执行所述存储器中存储的一个或多个程序,以实现权利要求1-7任一项所述的视频处理方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有一个或者多个程序,所述一个或者多个程序可以被一个或者多个处理器执行,以实现权利要求1-7任一项所述的视频处理方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京市商汤科技开发有限公司,未经北京市商汤科技开发有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111257835.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种中控式海底多头连续取样钻机
- 下一篇:车顶模组及试验台