[发明专利]一种音视频同步检测方法及系统有效
申请号: | 201810789036.0 | 申请日: | 2018-07-18 |
公开(公告)号: | CN108924646B | 公开(公告)日: | 2021-02-09 |
发明(设计)人: | 刘绍方;刘敬医 | 申请(专利权)人: | 北京奇艺世纪科技有限公司 |
主分类号: | H04N21/44 | 分类号: | H04N21/44;H04N21/439;H04N21/442;H04N21/43 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 王宝筠 |
地址: | 100080 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 视频 同步 检测 方法 系统 | ||
1.一种音视频同步检测方法,其特征在于,包括:
播放预设媒体文件,所述预设媒体文件包括:视频文件和音频文件,所述视频文件中的视频关键帧与所述音频文件中的音频关键帧的数量相同;
获取对所述预设媒体文件软解码过程生成的RGB视频数据和PCM音频数据;
对所述RGB视频数据和所述PCM音频数据分别进行归一化处理,得到相对应的归一化RGB视频数据和归一化PCM音频数据;
采用预设音视频同步检测算法比较所述归一化RGB视频数据和所述归一化PCM音频数据在相同时刻是否匹配;
当所述归一化RGB视频数据和所述归一化PCM音频数据在相同时刻匹配时,则确定为音视频同步;
其中,所述采用预设音视频同步检测算法比较所述归一化RGB视频数据和所述归一化PCM音频数据在相同时刻是否匹配的过程,包括:
将所述归一化PCM音频数据的音频关键帧序号和所述归一化RGB视频数据的视频关键帧序号进行比较,以确定所述归一化RGB视频数据和所述归一化PCM音频数据在相同时刻是否匹配,其中,当所述音频关键帧序号和所述视频关键帧序号相同时,确定为音视频同步;当所述音频关键帧序号和所述视频关键帧序号不相同时,确定为音视频不同步。
2.根据权利要求1所述的音视频同步检测方法,其特征在于,所述将所述归一化PCM音频数据的音频关键帧序号和所述归一化RGB视频数据的视频关键帧序号进行比较,以确定所述归一化RGB视频数据和所述归一化PCM音频数据在相同时刻是否匹配的过程,具体包括:
计算所述归一化PCM音频数据的音频数据平均值,并利用所述音频数据平均值从预先建立的双关键字键树中,查找相对应的音频关键帧序号;所述双关键字键树用于表征归一化PCM音频数据与音频关键帧序号的对应关系,所述双关键字键树中的两个关键字分别为:第一关键字和第二关键字,所述第一关键字用于存储所述音频关键帧序号对应的最小PCM音频数据值,所述第二关键字用于存储所述音频关键帧序号对应的最大PCM音频数据值;
从所述归一化RGB视频数据中获取视频样本矩阵,以及所述视频样本矩阵中的各个像素值;
将所述视频样本矩阵与初始化的视频全零矩阵按位或计算;
求取按位或计算结果矩阵中的各个像素值的像素平均值;
根据所述像素平均值确定所述当前归一化RGB视频数据的视频关键帧序号;
将所述音频关键帧序号和所述视频关键帧序号进行比较,以确定所述归一化RGB视频数据和所述归一化PCM音频数据在相同时刻是否匹配,其中,当所述音频关键帧序号和所述视频关键帧序号相同时,确定为音视频同步;当所述音频关键帧序号和所述视频关键帧序号不相同时,确定为音视频不同步。
3.根据权利要求1所述的音视频同步检测方法,其特征在于,所述预设媒体文件的生成过程包括:
将视频码流数据划分成多个视频关键帧,并对每个所述视频关键帧进行插值和视频编码压缩,得到相对应的待合成封装的视频码流数据;
将音频码流数据划分成与所述视频关键帧等数量且具有不同音量的音频关键帧,对每个所述音频关键帧进行插值和音频编码压缩后,得到相对应的待合成封装的音频码流数据;
将相同时刻的所述待合成封装的视频码流数据和所述待合成封装的音频码流数据合成一个音视频片段,得到多个音视频片段;
对多个所述音视频片段进行处理,得到所述预设媒体文件。
4.根据权利要求1所述的音视频同步检测方法,其特征在于,在对所述RGB视频数据和所述PCM音频数据进行归一化处理之后,还包括:
采用预设黑屏检测算法,判断所述归一化处理后的RGB视频数据,在预设不少于一个坐标值处相对应的RGB视频数据是否都表征黑色;
如果是,则确定为出现黑屏问题。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京奇艺世纪科技有限公司,未经北京奇艺世纪科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810789036.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种主题生成方法、装置及电子设备
- 下一篇:视频编辑方法、视频编辑装置、终端