[发明专利]一种音视频分离拍摄方法、设备及计算机可读存储介质在审
申请号: | 202111405668.0 | 申请日: | 2021-11-24 |
公开(公告)号: | CN114095637A | 公开(公告)日: | 2022-02-25 |
发明(设计)人: | 廖原 | 申请(专利权)人: | 努比亚技术有限公司 |
主分类号: | H04N5/225 | 分类号: | H04N5/225;H04N5/268;H04N5/265 |
代理公司: | 深圳协成知识产权代理事务所(普通合伙) 44458 | 代理人: | 伍永森 |
地址: | 518000 广东省深圳市南山区桃源街道福*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 视频 分离 拍摄 方法 设备 计算机 可读 存储 介质 | ||
1.一种音视频分离拍摄方法,其特征在于,所述方法包括:
获取拍摄视频的视频数据,根据所述视频数据中的第一图像特征和/或第一音频特征确定所述拍摄视频的与图像相关的至少一个第一分割点、以及与音频相关的至少一个第二分割点;
将所述视频数据分离为图像数据和音频数据,并通过所述第一分割点将所述图像数据分割为多段图像,以及,通过所述第二分割点将所述音频数据分割为多段音频;
在所述多段图像的至少一段图像中确定至少一种第二图像特征,以及在所述多段音频的至少一段音频中确定至少一种第二音频特征;
根据所述多段图像的第一段数、所述多段音频的第二段数、所述第二图像特征以及所述第二音频特征确定至少一个图像段和一个音频段的结合点,并通过所述结合点和预设的时序条件组合所有的所述多段图像和所有的所述多段音频。
2.根据权利要求1所述的音视频分离拍摄方法,其特征在于,所述获取拍摄视频的视频数据,根据所述视频数据中的第一图像特征和/或第一音频特征确定所述拍摄视频的与图像相关的至少一个第一分割点、以及与音频相关的至少一个第二分割点,包括:
在拍摄视频结束时获取所述视频数据;
识别所述视频数据中的图像内容和音频内容。
3.根据权利要求2所述的音视频分离拍摄方法,其特征在于,所述获取拍摄视频的视频数据,根据所述视频数据中的第一图像特征和/或第一音频特征确定所述拍摄视频的与图像相关的至少一个第一分割点、以及与音频相关的至少一个第二分割点,还包括:
根据所述图像内容的转场画面确定所述第一图像特征,其中,所述转场画面包括人物人脸切换、人物动作切换以及画面背景切换中的一种或多种;
根据所述音频内容的转折语段确定所述第一音频特征,其中,所述转折语段包括人物言语切换、人物语气切换以及背景音乐切换中的一种或多种。
4.根据权利要求3所述的音视频分离拍摄方法,其特征在于,所述获取拍摄视频的视频数据,根据所述视频数据中的第一图像特征和/或第一音频特征确定所述拍摄视频的与图像相关的至少一个第一分割点、以及与音频相关的至少一个第二分割点,还包括:
选定与至少一项所述人物人脸切换、或者至少一项所述人物动作切换、或者至少一项所述画面背景切换相对应的所述第一分割点;
选定与至少一项所述人物言语切换、或者至少一项所述人物语气切换、或者至少一项所述背景音乐切换相对应的第二分割点。
5.根据权利要求4所述的音视频分离拍摄方法,其特征在于,所述在所述多段图像的至少一段图像中确定至少一种第二图像特征,以及在所述多段音频的至少一段音频中确定至少一种第二音频特征,包括:
在所述多段图像中的每一段图像中确定至少一种待定的第二图像特征,其中,待定的第二图像特征是所述人物人脸切换、所述人物动作切换以及所述画面背景切换的切换图像帧;
在所述多段音频中的每一段音频中确定至少一种待定的第二音频特征,其中,待定的第二音频特征是所述人物言语切换、所述人物语气切换以及所述背景音乐切换的切换音频帧。
6.根据权利要求5所述的音视频分离拍摄方法,其特征在于,所述在所述多段图像的至少一段图像中确定至少一种第二图像特征,以及在所述多段音频的至少一段音频中确定至少一种第二音频特征,还包括:
匹配每一待定的第二图像特征和每一待定的第二音频特征;
获取所述人物人脸切换、所述人物动作切换以及所述画面背景切换,与所述人物言语切换、所述人物语气切换以及所述背景音乐切换中,相互匹配的所述图像帧和所述音频帧。
7.根据权利要求6所述的音视频分离拍摄方法,其特征在于,所述根据所述多段图像的第一段数、所述多段音频的第二段数、所述第二图像特征以及所述第二音频特征确定至少一个图像段和一个音频段的结合点,并通过所述结合点和预设的时序条件组合所有的所述多段图像和所有的所述多段音频,包括:
根据每一组相匹配的所述图像帧和所述音频帧得到所述结合点;
通过所述结合点分别对所有的所述多段图像和所有的所述多段音频进行重新组合。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于努比亚技术有限公司,未经努比亚技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111405668.0/1.html,转载请声明来源钻瓜专利网。