[发明专利]主播端流媒体数据生成系统及方法、网络直播系统及方法

权利要求书

1.一种主播端流媒体数据生成系统，包括音视频采集模块(4)、音视频编码模块(5)和流媒体封装模块(6)，音视频采集模块(4)的输出端通过音视频编码模块(5)与流媒体封装模块(6)的输入端相连，流媒体封装模块(6)输出流媒体数据；其特征在于，还包括场景分析模块(7)和控制模块(8)，音视频采集模块(4)的输出端通过场景分析模块(7)和控制模块(8)的输入端相连，控制模块(8)的输出端与音视频编码模块(5)相连；

其中场景分析模块(7)用于对音视频采集模块(4)采集到的视频数据进行分析，判断当前的场景类别N_i并将场景类别N_i输送至控制模块(8)；

控制模块(8)内部预设有包含n个元素的场景类别集合N以及流媒体数据生成方案集合M，其中M与N中的元素一一对应，控制模块(8)根据N_i选择执行M中对应的流媒体数据生成方案；所述流媒体数据生成方案包括设置音视频编码模块(5)对视频数据的编码参数；

所述控制模块(8)的输出端还与流媒体封装模块(6)相连；所述流媒体数据生成方案包括控制流媒体封装模块(6)仅封装音频数据，或者控制流媒体封装模块(6)仅封装视频数据，或者控制流媒体封装模块(6)封装音频和视频数据；

其中：

N＝{N_i|i＝1，2，3}，其中N₁＝正常场景，N₂＝画面静止场景，N₃＝镜头遮挡场景；M＝{M_j|j＝1，2，3}；其中M₁＝设置音视频编码模块对视频数据的目标码率为恒定值T₁且流媒体封装模块封装音频和视频数据，M₂＝设置音视频编码模块对视频数据的目标码率为恒定值T₂且流媒体封装模块封装音频和视频数据，M₃＝流媒体封装模块仅封装音频数据，其中T₂＜T₁；N₁对应M₁，N₂对应M₂，N₃对应M₃；

场景分析模块(7)对视频图像进行分析并判断当前场景类别的过程如下：

a1.求视频图像的平均亮度值AVG_luma，若连续S帧图像的AVG_luma小于预设值Th₁，则确定当前场景类别为N₃；否则跳转至步骤b1；

b1.对视频图像进行滤波降噪处理，通过帧差法检测当前图像相对于前一帧图像或前几帧图像的运动量，再对帧差法之后的图像进行滤波处理并统计运动像素点个数Sum_mov，若连续S帧图像的Sum_mov小于预设值Th₂，则确定当前场景类别为N₂；否则跳转至步骤c1；

c1.确定当前场景类别为N₁；

或者，

N＝{N_i|i＝1～n}，其中N₁＝镜头遮挡场景，N_m＝画面稳定且图像运动复杂度波动，N_n＝画面状态不稳定；M＝{M_j|j＝1～n}，其中M₁＝流媒体封装模块仅封装音频数据，M_m＝设置音视频编码模块对视频数据的目标码率为恒定值T_m且流媒体封装模块封装音频和视频数据，M_n＝设置音视频编码模块对视频数据的目标码率为恒定值T₁且流媒体封装模块封装音频和视频数据；

其中m∈[2，n-1]；T_m的数值由以下规则确定：

若(T/(n-2))*m≥Th₃，则T_m＝(T/(n-2))*m，否则T_m＝Th₃，其中T为给定的目标码率；Th₃为预设的目标码率值；

场景分析模块(7)对视频图像进行分析并判断当前场景类别的过程如下：

a2.求视频图像的平均亮度值AVG_luma，若连续S帧图像的AVG_luma小于预设值Th₁，则确定当前场景类别为N₁；否则跳转至步骤b2；

b2.对视频图像进行滤波降噪处理，通过帧差法检测当前图像相对于前一帧图像或前几帧图像的运动量，再对帧差法之后的图像进行滤波处理并统计运动像素点个数Sum_mov，若连续S帧图像的Sum_mov∈[Sum_m,Sum_m+ΔSum)，则确定当前场景类别为N_m；否则跳转至步骤c2；其中，Sum_m＝(m-1)*(W*H/(n-2))，ΔSum＝(W*H/(n-2))，W表示视频图像的宽，H表示视频图像的高；

c2.确定当前场景类别为N_n。