[发明专利]一种音频视频同步的方法和云端处理系统有效
申请号: | 202310507785.0 | 申请日: | 2023-05-08 |
公开(公告)号: | CN116233472B | 公开(公告)日: | 2023-07-18 |
发明(设计)人: | 邓正秋;徐振宇 | 申请(专利权)人: | 湖南马栏山视频先进技术研究院有限公司 |
主分类号: | H04N21/218 | 分类号: | H04N21/218;H04N21/238;H04N21/24;H04N21/242;H04N21/43 |
代理公司: | 长沙智勤知识产权代理事务所(普通合伙) 43254 | 代理人: | 吴子鑫 |
地址: | 410000 湖南省长*** | 国省代码: | 湖南;43 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 音频视频 同步 方法 云端 处理 系统 | ||
1.一种音频视频同步的方法,其特征在于,包括如下步骤:
待播放的视频文件通过云端的第一传输通道向播放端传输,待播放的音频文件通过云端的第二传输通道向播放端传输;
播放端根据视频文件的接收和播放,并根据音频文件的接收和播放,预测由于视频文件和音频文件的传输不畅导致的异常播放时段,并获取异常播放时段原本对应的应播放的视频片段和音频片段,包括:云端按照预设周期获取播放端的当前播放速率,根据初设播放速率和当前播放速率的比值,确定未播放的每一影音片段的调整播放时长;
根据异常播放时段,计算按照当前播放速率的正常播放时段;
根据正常播放时段和异常播放时段,调整播放端的播放速率,以为未来的异常播放时段预留等待时长;
将对应于同一时间片段的视频压缩包和音频压缩包采用同一特征码进行标记,以使同一特征码关联到时间片段的起止时间,其中,特征码用于标记同一时间片段对应的视频压缩包和音频压缩包的对应关系,同一特征码对应的视频压缩包和音频压缩包属于同一影音片段;
云端建立第一控制表,并将每一特征码和每一特征码对应的时间片段记录于所述第一控制表;其中,第一控制表中的各特征码按照各个影音片段的时间片段先后顺序依次排列;
云端将第一控制表和调整播放时长发送至播放端;
播放端建立第二控制表;
播放端根据播放起点时间和每一特征码对应的影音片段的调整播放时长,确定每一特征码对应的影音片段的计划播放时段;
播放端根据每一特征码对应的影音片段的计划播放时段、每一视频压缩包的设定解码时长和每一音频压缩包的设定解码时长,得到每一特征码对应的影音片段的最迟接收时间;其中,最迟接收时间指的是在满足正常播放的情况下,播放端接收到同一特征码对应的视频压缩包和音频压缩包的最迟时间;
播放端根据每一特征码、每一特征码对应的时间片段、每一特征码对应的影音片段的计划播放时段、每一特征码对应的影音片段的最迟接收时间,建立第二控制表,以通过第二控制表从播放端接收的角度侦测异常播放时段。
2.根据权利要求1所述的音频视频同步的方法,其特征在于,所述根据正常播放时段和异常播放时段,调整播放端的播放速率,以为未来的异常播放时段预留等待时长的步骤,包括:
计算异常播放时段原本对应的应播放的视频片段和音频片段传输至播放端的等待时长;
计算延长正常播放时段以等待异常播放时段结束,所需要设置的校正播放速率;
若校正播放速率不低于设置的播放速率下限,则将播放端的播放速率调整为校正播放速率,以为未来的异常播放时段预留等待时长。
3.根据权利要求1所述的音频视频同步的方法,其特征在于,所述方法,还包括:
将视频采集终端采集的视频文件,和音频采集终端采集的音频文件,分别按照采集时间采用同步的时间戳进行标记;
在对视频文件和音频文件进行编码时,将时间戳分为若干依次连续且等长的时间片段;
将视频文件处理成对应每一时间片段的多个视频压缩包,将音频文件处理成对应每一时间片段的多个音频压缩包。
4.根据权利要求3所述的音频视频同步的方法,其特征在于,所述待播放的视频文件通过云端的第一传输通道向播放端传输,待播放的音频文件通过云端的第二传输通道向播放端传输的步骤,包括:
将对应每一时间片段的各个视频压缩包通过第一传输通道分别向播放端传输;
将对应每一时间片段的各个音频压缩包通过第二传输通道分别向播放端传输。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于湖南马栏山视频先进技术研究院有限公司,未经湖南马栏山视频先进技术研究院有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202310507785.0/1.html,转载请声明来源钻瓜专利网。