[发明专利]一种基于并行处理的流媒体音视频同步播放方法

权利要求书

1.一种基于并行处理的流媒体音视频同步播放方法，其特征在于，时间上或空间上并行处理音视频获取、音视频拆分、视频解码、音频解码、时间戳误差分析、视频渲染和音频播放步骤，所述的时间戳误差是视频解码时间戳和音频解码时间戳之间的音视时间戳误差。

2.如权利要求1所述一种基于并行处理的流媒体音视频同步播放方法，其特征在于，所述音视频获取步骤之前构建缓冲区空间，所述缓冲区空间包括缓冲区空间包括音视频混合缓冲区队列                                               、视频解码缓冲区队列、音频解码缓冲区队列、视频渲染缓冲区队列、视频解码时间戳缓冲区队列、音频播放缓冲区队列、音频解码时间戳缓冲区队列、音视频误差时间戳缓冲区队列。

3.如权利要求1或2所述一种基于并行处理的流媒体音视频同步播放方法，其特征在于，所述音视频获取步骤将从流媒体源获取到的音视频混合数据包依次插入预先构建的音视频混合缓冲区队列。

4.如权利要求3所述一种基于并行处理的流媒体音视频同步播放方法，其特征在于，所述音视频拆分步骤从音视频混合缓冲区队列依次取出音视频混合数据包，利用音视频拆分算法对音视频混合数据包进行音视频拆分，提取视频流、音视流、拆分后时间戳；将视频流与时间戳组成视频解码节点插入预先构建的视频解码缓冲区队列；将音频流与时间戳组成音频解码节点插入预先构建的音频解码缓冲区队列。

5.如权利要求4所述一种基于并行处理的流媒体音视频同步播放方法，其特征在于，所述视频解码步骤从视频解码缓冲区队列依次取出视频解码节点，对节点中视频流进行解码，获取解码后的视频流、视频解码时间戳；将视频流与拆分后时间戳组成视频渲染节点插入预先构建的视频渲染缓冲区队列；将视频解码时间戳和拆分后时间戳组成视频解码时间戳节点插入预先构建的视频解码时间戳缓冲区队列。

6.如权利要求5所述一种基于并行处理的流媒体音视频同步播放方法，其特征在于，所述音频解码步骤从音频解码缓冲区队列依次取出音频解码节点，对节点中音频流进行解码，获取解码后的音频流、音频解码时间戳；将音频流与拆分后时间戳组成音频播放节点插入预先构建的音频播放缓冲区队列；将音频解码时间戳和拆分后时间戳组成音频解码时间戳节点插入预先构建的音频解码时间戳缓冲区队列。

7.如权利要求6所述一种基于并行处理的流媒体音视频同步播放方法，其特征在于，所述时间戳误差分析步骤以拆分后时间戳为关键字在视频解码缓冲区队列查找视频解码时间戳对应节点信息；再以拆分后时间戳为关键字在音频解码缓冲区队列查找音频解码时间戳对应节点信息；通过视频解码时间戳和音频解码时间戳得到音视误差时间戳 =  - ；将音视误差时间戳与拆分后时间戳组成音视频误差时间戳节点插入预先构建的音视频误差时间戳缓冲区队列。

8.如权利要求7所述一种基于并行处理的流媒体音视频同步播放方法，其特征在于，所述视频渲染步骤依次从视频解码缓冲区队列取出视频渲染节点，获取视频流和拆分后时间戳；再根据拆分后时间戳从音视频误差时间戳缓冲区队列取出音视误差时间戳节点，获取音视频误差时间；判断音视频误差时间与预设值的大小关系是否成立，如果成立则立即播放，否则就等待再播放。

9.如权利要求8所述一种基于并行处理的流媒体音视频同步播放方法，其特征在于，所述音频播放步骤依次从音频解码缓冲区队列取出音频播放节点，获取音频流和拆分后时间戳；再根据拆分后时间戳从音视频误差时间戳缓冲区队列取出音视误差时间戳节点，获取音视频误差时间；判断音视频误差时间与预设值的大小关系是否成立，如果成立则等待再播放，否则就立即播放。