[发明专利]音视频多媒体数据处理方法及其设备有效
申请号: | 201811260509.4 | 申请日: | 2018-10-26 |
公开(公告)号: | CN109640082B | 公开(公告)日: | 2021-02-12 |
发明(设计)人: | 罗瑜;张莹;冉文方 | 申请(专利权)人: | 浙江鼎越电子有限公司 |
主分类号: | H04N19/107 | 分类号: | H04N19/107;H04N19/176;H04N19/184;H04N21/233;H04N21/2343;H04N21/2368 |
代理公司: | 深圳市兰锋盛世知识产权代理有限公司 44504 | 代理人: | 罗炳锋 |
地址: | 312000 浙江省*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视频 多媒体 数据处理 方法 及其 设备 | ||
1.一种音视频多媒体数据处理方法,其特征在于,包括:
在音视频数据流采集过程中设定预设间隔;
根据所述预设间隔将所述音视频数据流压缩编码成音视频数据单元;包括:根据所述预设间隔,将所述音视频数据流中的视频数据转换成视频图像帧;利用自适应分割的帧内预测方式对所述视频图像帧进行预测;利用AAC、MP3或WMA格式将所述音视频数据流中的音频数据进行压缩;将压缩后的音频数据和视频数据合成音视频数据单元;其中,所述自适应分割的帧内预测方式包括如下步骤:S1、确定图像块的划分方式;所述划分方式包括水平划分、垂直划分、不划分;S2、分别计算每种划分方式下图像块比特数;包括:1)若采用水平划分方式,将图像块分为分别包括N个像素的上图像块和下图像块;在上图像块像素中,得到上图像块像素的最大值和上图像块像素的最小值,计算得到表示上图像块像素的最大值和上图像块像素的最小值的差值的上图像块最少比特数;在下图像块像素中,得到下图像块像素的最大值和下图像块像素的最小值,计算得到表示下图像块像素的最大值和下图像块像素的最小值的差值的下图像块最少比特数;根据上图像块最少比特数、下图像块最少比特数得到水平划分方式下图像块比特数为SEGud = N*BIT_MINup + N*BIT_MINdown + 2*BITDEPTH,其中,BIT_MINup为上图像块最少比特数,N*BIT_MINdown为下图像块最少比特数,BITDEPTH为原始像素数据的比特深度;2)若采用垂直划分方式,将图像块分为分别包括N个像素的左图像块和右图像块;在左图像块像素中,得到左图像块像素的最大值和左图像块像素的最小值,计算得到表示左图像块像素的最大值和左图像块像素的最小值的差值的左图像块最少比特数;在右图像块像素中,得到右图像块像素的最大值和右图像块像素的最小值,计算得到表示右图像块像素的最大值和右图像块像素的最小值的差值的右图像块最少比特数;根据左图像块最少比特数、右图像块最少比特数得到垂直划分方式下图像块比特数为:SEGlr = N*BIT_MINleft + N*BIT_MINright + 2*BITDEPTH,其中,BIT_MINleft为左图像块最少比特数,N* BIT_MINright为右图像块最少比特数,BITDEPTH为原始像素数据的比特深度;3)若采用不划分方式,图像块包括2N个像素,得到图像块像素的最大值和图像块像素的最小值,计算得到表示图像块像素的最大值和图像块像素的最小值的差值的图像块最少比特数,根据图像块最少比特数得到不划分方式下图像块比特数为:SUB-SEG=2N*BIT_MIN + BITDEPTH,其中,BIT_MIN为图像块最少比特数,BITDEPTH为原始像素数据的比特深度;其中,N为自然数;S3、将所述图像块比特数最小值对应的划分方式作为所述图像块的当前划分方式;S4、计算所述图像块在所述当前划分方式下的预测残差;预测残差为每个像素分别减去图像块中像素最小值,得到该图像块所有像素的预测残差;其中,若当前划分方式为水平划分方式,计算上图像块的预测残差为,将该上图像块的N个像素,分别减去上图像块像素的最小值,得到该上图像块的所有像素的预测残差;计算下图像块的预测残差为,将该下图像块的N个像素,分别减去下图像块像素的最小值,得到该下图像块的所有像素的预测残差;若当前划分方式为垂直划分方式,计算左图像块的预测残差为,将该左图像块的N个像素,分别减去左图像块像素的最小值,得到该左图像块的所有像素的预测残差;计算右图像块的预测残差为,将该右图像块的N个像素,分别减去右图像块像素的最小值,得到该右图像块的所有像素的预测残差;若当前划分方式为不划分方式,计算图像块的预测残差为,将该图像块的2N个像素,分别减去图像块像素的最小值,得到该图像块的所有像素的预测残差; S5、当判断所述当前划分方式为水平划分或垂直划分时,对所述当前划分方式下划分的两块图像块分别执行步骤S1;S6、当判断所述当前划分方式为不划分时,结束对所述图像块的划分;
将所述音视频数据单元发送至服务器;
根据控制指令将所述服务器接收到的所述音视频数据单元合成对应的音视频数据。
2.根据权利要求1所述的方法,其特征在于,将所述音视频数据单元发送至服务器之前,还包括:
将所述音视频数据单元添加索引标识。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浙江鼎越电子有限公司,未经浙江鼎越电子有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811260509.4/1.html,转载请声明来源钻瓜专利网。