[发明专利]基于RTP/RTCP反馈预警算法实现音视频同步方法

权利要求书

1.基于RTP/RTCP反馈预警算法实现音视频同步方法，其特征在于该方法包括以下步骤：

步骤(1).采集音视频信号；

步骤(2).编码音视频信号，打上相应的时间戳信息；

步骤(3).封包、发送音视频信号；

步棸(4).根据RTP包中时间戳信息对音视频信号解码、播放；

步棸(5).将播放同步信息利用RTCP协议传送回服务器端，服务端根据反馈信息调整发送策略实现音视频同步。

2.根据权利要求1所述的同步控制方法，其特征在于：步骤(5)中调整发送策略具体是：

根据人耳的听觉特性，将音视频偏差分为四个区域：

A.同步区：偏差在-60ms～+60ms；

B.预警调整区：偏差在-120ms～-60ms和60ms～120ms；

C.调整区：偏差在-160ms～-120ms和120ms～160ms；

D.不同步区：偏差<-160ms和偏差>160ms；

对于同步区正常播放；

对于预警调整区，调整方法如下：

如果视频帧落后，则执行如下步骤1-3：

步骤1，检查音视频缓冲区占用率；

步骤2，如果视频缓冲区占用率大于等于50%，调整播放策略，只播放关键帧，发送端不用做调整；如果视频缓冲区占用率低于50%，查看音频缓冲区占用率，如果音频缓冲区占用率大于等于50%，则提高发送端视频帧发送比例，将视频帧比例提高40%-60%；

步骤3，若音视频帧播放缓冲区的占用率都小于50%，提高10%-%20视频帧发送比例；

对于调整区，已经到了临界区的边缘，即将出现音视频不同步现象；假设视频帧落后，调整算法如下：

步骤4，调整播放器的播放策略，只播放关键帧；

步骤5，调整服务器端音视频帧的发送比例，具体调整方法如下：

步骤5-1，检查音视频缓冲区占用率；

步骤5-2，如果视频缓冲区占用率大于等于50%，调整播放策略，只播放关键帧，发送端不用做调整；如果视频缓冲区占用率低于50%，查看音频缓冲区占用率，如果音频缓冲区占用率大于等于50%，则提高发送端视频帧发送比例，将视频帧比例提高60%-70%；

步骤5-3，若音视频帧播放缓冲区的占用率都小于50%，提高10%-%20视频帧发送比例；

对于不同步区，调整算法如下：

步骤6，调整客户端的播放策略，如果视频帧落后，在直接丢弃，如果视频帧超前，则采取重播策略；

步骤7，调整服务器端的发送比例，具体调整方法如下：

步骤7-1，检查音视频缓冲区占用率；

步骤7-2，如果视频缓冲区占用率大于等于50%，调整播放策略，只播放关键帧，发送端不用做调整；如果视频缓冲区占用率低于50%，查看音频缓冲区占用率，如果音频缓冲区占用率大于等于50%，则提高发送端视频帧发送比例，将视频帧比例提高70%-85%；

步骤7-3，若音视频帧播放缓冲区的占用率都小于50%，提高10%-%20视频帧发送比例。