[发明专利]监控音视频质量的方法和装置、系统、电子设备

权利要求书

1.一种监控音视频质量的方法，用于视频直播系统中，其特征在于，包括：

获取直播流的音视频数据文件；

解码所述音视频数据文件生成原始音频数据和原始视频数据；

评价所述原始音频数据的音频质量；

评价所述原始视频数据的视频质量；

通过预先训练的评价模型和音频质量评价结果、视频质量评价结果获取所述音视频数据文件的质量评分，其中，所述评价模型利用训练用的直播流的音频质量评价结果、训练用的视频质量评价结果和人工质量评分训练得到；

利用所述质量评分对所述原始视频数据进行分类分析所述原始视频数据的质量原因，并根据所述质量原因优化直播环境配置，所述直播环境配置包括视频分辨率、视频帧率、发起方式、音频采样率、编解码格式、带宽和/或视频场景类型；

监控所述音频质量评价结果和/或所述视频质量评价结果；

若所述音频质量评价结果和/或所述视频质量评价结果出现异常，则报警。

2.根据权利要求1所述的方法，其特征在于，所述预先训练的评价模型，包括：

获取训练用直播流的音视频数据文件及其人工质量评分；

评价所述训练用直播流的音频质量；

评价所述训练用直播流的视频质量；

利用所述训练用直播流的音频质量评价结果、所述训练用直播流的视频质量评价结果和所述直播流的人工质量评分训练机器模型得到所述评价模型。

3.根据权利要求1所述的方法，其特征在于，所述评价所述原始音频数据的音频质量，包括：

评估所述原始音频数据的音量；和/或

评估所述原始音频数据的噪声；和/或

评估所述原始音频数据的相位。

4.根据权利要求1所述的方法，其特征在于，所述评价所述原始视频数据的视频质量，包括：

利用无参考的空域图像质量评价算法评价所述原始视频数据；和/或

利用梯度结构相似度算法评价所述原始视频数据。

5.根据权利要求4所述的方法，其特征在于，所述利用无参考的空域图像质量评价算法评价所述原始视频数据，包括：

提取所述原始视频数据的自然场景统计信息；

数据拟合所述自然场景统计信息以得到特征向量；

利用预先训练的支持向量机模型和所述特征向量得到所述原始视频数据的质量评价。

6.根据权利要求4所述的方法，其特征在于，所述利用梯度结构相似度算法评价所述原始视频数据包括：

构建所述原始视频数据的参考图像数据；

提取所述原始视频数据和所述参考图像数据的梯度图像；

找到所述原始视频数据的所述梯度图像中梯度信息最丰富的图像块以及所述参考图像数据的梯度图像中与之对应的图像块；

计算所述原始视频数据和所述参考图像数据的所述图像块的梯度结构相似度。

7.一种监控音视频质量的系统，其特征在于，包括：

直播流数据库装置，用于存储直播流的音视频数据；

任务分发装置，用于分发任务；

缓存队列装置，用于存储所述直播流的状态数据；

任务消息队列装置，用于存储所述任务分发装置分发的任务；

任务消费者装置，用于

从所述任务消息队列装置获取直播流的视频任务；

下载所述直播流的音视频文件；

利用音视频质量评价装置分析所述直播流的视频；

利用直播流质量分析结果数据库装置存储所述直播流的视频的分析结果；

更改所述缓存队列装置中所述直播流的状态数据；

音视频质量评价装置，用于评价所述直播流的音视频质量并优化直播环境配置，所述直播环境配置包括视频分辨率、视频帧率、发起方式、音频采样率、编解码格式、带宽和/或视频场景类型；

直播流质量分析结果数据库装置，用于存储所述直播流的音视频分析结果；

检查装置，用于检查所述缓存队列装置中所述直播流的分析任务是否完成；

邮件装置，用于发送今日任务量邮件和今日任务完成邮件。