[发明专利]音视频多媒体数据库的构建及多媒体主观质量评价方法有效
申请号: | 202010172382.1 | 申请日: | 2020-03-12 |
公开(公告)号: | CN111355949B | 公开(公告)日: | 2021-05-25 |
发明(设计)人: | 杨小康;闵雄阔;翟广涛;朱文瀚;朱煜程;朱丹丹 | 申请(专利权)人: | 上海交通大学 |
主分类号: | H04N17/00 | 分类号: | H04N17/00;H04N21/234;H04N21/233;H04N21/44;H04N21/439;H04N21/475 |
代理公司: | 上海恒慧知识产权代理事务所(特殊普通合伙) 31317 | 代理人: | 刘翠 |
地址: | 200240 *** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视频 多媒体 数据库 构建 主观 质量 评价 方法 | ||
1.一种音视频多媒体数据库的构建方法,其特征在于,包括:测试用音视频多媒体数据库的构建以及训练用音视频多媒体数据库的构建;其中:
所述测试用音视频多媒体数据库和训练用音视频多媒体数据库,均包括多个同时包含视频和音频的音视频多媒体信号数据及其所对应的失真音视频多媒体信号数据;其中,每一个音视频多媒体信号数据均具有多种不同的视觉特性和听觉特性;
所述视觉特性包括视频的空域复杂度SI和视频的时域复杂度TI;
所述视频的空域复杂度SI:
其中,I表示视频帧,eh表示横向的边缘提取算子,ev表示纵向的边缘提取算子,表示视频帧的边缘强度,std用于计算二维边缘图中所有像素的标准差;
所述视频的时域复杂度TI:
TI=std(It-It-1),
其中,It及It-1表示视频的相邻两帧,std用于计算二维帧差图所有像素的标准差;
所述听觉特性包括音频的复杂度AI:
AI=std(At-At-1),
其中,At及At-1表示音频的相邻样本值,std用于计算一维音频相邻样本差值的标准差;
所述测试用音视频多媒体数据库和训练用音视频多媒体数据中的音视频多媒体信号数据内容不重合,所对应的失真音视频多媒体信号数据的失真类型及失真程度相似;
所述失真音视频多媒体信号数据,通过以下方式得到:
对音视频多媒体信号数据中的视频和音频分别进行3-5级压缩失真,将得到的视频失真和音频失真进行任意组合,得到所有视频和音频失真组合,将所有视频和音频失真组合应用至音视频多媒体信号中,得到失真音视频多媒体信号。
2.一种基于权利要求1所述的音视频多媒体数据库的构建方法构建得到的音视频多媒体数据库实施的音视频多媒体主观质量评价方法,其特征在于,包括:
S1:前期准备阶段,包括:搭建音视频多媒体质量评价环境以及选择训练用音视频多媒体数据库中的数据对测试者进行训练;
S2:测试阶段,包括:
从测试用音视频多媒体数据库中选择待测试数据;
计算测试所需时间长度,当测试所需时间长度小于等于设定时间长度,则将该测试直接作为一次子测试进行;当测试所需时间长度超过设定时间长度,则将该测试均分为多次子测试进行,并保证相邻两次子测试之间的时间间隔至少为T;
在每一次子测试中,以随机的顺序测试所有选择的待测试数据,并对待测试数据的质量进行主观评价,得到主观质量评价结果;
S3:后期数据处理阶段,包括:
分析主观质量评价结果,得到音视频主观质量评分数据,剔除数据中的异常值,得到描述每组音视频多媒体信号数据主观质量的平均分数;
统计每组音视频多媒体信号数据主观质量的平均分数,得到音频质量及视频质量对音视频联合质量评价中的影响;
所述S1中,所搭建的音视频多媒体质量评价环境,包括:
测试环境;
终端计算机;
设置于测试环境内并与终端计算机连接的视频显示器以及音频播放器;
所述S1中,所述测试环境满足无干扰、噪声低于10分贝和正常照明的条件。
3.根据权利要求2所述的音视频多媒体主观质量评价方法,其特征在于,所述音视频多媒体数据库安装于终端计算机中并通过终端计算机控制数据库中视频和音频的播放,并采集主观质量评价结果数据。
4.根据权利要求2所述的音视频多媒体主观质量评价方法,其特征在于,所述步骤S2中,设定时间长度为30分钟。
5.根据权利要求2所述的音视频多媒体主观质量评价方法,其特征在于,所述步骤S2中,T为24小时。
6.根据权利要求2所述的音视频多媒体主观质量评价方法,其特征在于,所述S3中,得到描述每组音视频多媒体信号主观质量的平均分数的方法为:
首先,将剔除异常值后的所有测试者的主观质量评分数据转换成Z值;
然后,将Z值线性变换至0-100区间,平均线性变换后的主观质量评分数据,得到平均意见分数MOS:
其中:rij表示第i位测试者给第j个视频的评分;μi表示第i位测试者的平均评分;σi表示第i位测试者所有评分的标准差;N是测试者总人数;
统计每组音视频多媒体信号数据主观质量的平均分数,得到音频质量及视频质量对音视频联合质量的影响。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海交通大学,未经上海交通大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010172382.1/1.html,转载请声明来源钻瓜专利网。