[发明专利]一种分布式视频编码框架有效
申请号: | 201510883301.8 | 申请日: | 2015-12-04 |
公开(公告)号: | CN105430406B | 公开(公告)日: | 2018-06-12 |
发明(设计)人: | 程德强;陈刚;姜海龙;寇旗旗;徐祖倩;刘海;张国鹏;郭星歌 | 申请(专利权)人: | 中国矿业大学 |
主分类号: | H04N19/30 | 分类号: | H04N19/30 |
代理公司: | 北京远创理想知识产权代理事务所(普通合伙) 11513 | 代理人: | 卫安乐 |
地址: | 22111*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供一种分布式视频编码框架,包括:基本视点、增强视点、Wyner‐Ziv编码器、Wyner‐Ziv解码器、第一帧内编码器、第一帧内解码器、时间边信息生成模块、第二帧内编码器、第二帧内解码器、空间边信息生成模块、融合模块、重构模块;其中,基本视点、增强视点为采集设备,Wyner‐Ziv编码器与解码器、第一帧内编码器与解码器、第二帧内编码器与解码器分别对第一Wyner‐Ziv帧、第一关键帧、第二关键帧编码与解码;时间边信息生成模块、空间边信息生成模块分别生成时间边信息帧、空间边信息帧;融合模块对时间边信息帧与空间边信息帧进行融合后,由重构模块进行图像重建。本发明能适应恶劣复杂的环境,具有较高的容错性与普遍适用性,可广泛应用于矿业领域。 | ||
搜索关键词: | 解码器 边信息生成 帧内编码器 边信息帧 分布式视频编码 基本视点 融合模块 重构模块 编码器 关键帧 帧内 视点 普遍适用性 解码 采集设备 矿业领域 图像重建 框架本 容错性 融合 应用 | ||
【主权项】:
一种分布式视频编码框架,其特征在于,所述编码框架包括基本视点、增强视点、Wyner‑Ziv编码器、Wyner‑Ziv解码器、第一帧内编码器、第一帧内解码器、时间边信息生成模块、第二帧内编码器、第二帧内解码器、空间边信息生成模块、融合模块、重构模块;其中,基本视点,用于采集第一环境视频图像,根据第一环境视频图像的序号将第一环境视频图像分为第一Wyner‑Ziv帧与第一关键帧,将第一Wyner‑Ziv帧、第一关键帧分别发送至Wyner‑Ziv编码器、第一帧内编码器;增强视点,用于采集第二环境视频图像,根据第二环境视频图像的序号将第二环境视频图像分为第二Wyner‑Ziv帧与第二关键帧,将第二关键帧发送至第二帧内编码器;Wyner‑Ziv编码器,用于对基本视点发送的第一Wyner‑Ziv帧进行去除像素间相关性的离散余弦变换,对将变换系数量化后形成的位平面进行信道编码,并将得到的Wyner‑Ziv编码帧通过无线信道发送至Wyner‑Ziv解码器;Wyner‑Ziv解码器,用于对Wyner‑Ziv编码器发送的Wyner‑Ziv编码帧进行解码,并将Wyner‑Ziv解码帧发送至重构模块;第一帧内编码器,用于对基本视点发送的第一关键帧进行H.264帧内编码,并将得到的第一关键编码帧通过无线信道发送至第一帧内解码器;第一帧内解码器,用于对第一帧内编码器发送的第一关键编码帧进行H.264帧内解码,并将得到的第一关键解码帧发送至时间边信息生成模块;时间边信息生成模块,用于对来自第一帧内解码器的两个连续的第一关键解码帧依次进行预处理、块匹配、双向运动内插后,将生成的时间边信息帧发送至融合模块;第二帧内编码器,用于对增强视点发送的第二关键帧进行H.264帧内编码,并将得到的第二关键编码帧通过无线信道发送至第二帧内解码器;第二帧内解码器,用于对第二帧内编码器发送的第二关键编码帧进行H.264帧内解码,并将得到的第二关键解码帧发送至空间信息生成模块;空间边信息生成模块,用于根据第二帧内解码器发送的第二关键解码帧进行运动估计,将得到的初始空间边信息帧发送至融合模块;融合模块,用于根据基本视点与增强视点之间的相关性,通过基础矩阵将空间边信息生成模块发送的初始空间边信息帧映射到基本视点,得到映射空间边信息帧,并采用平均内插法对时间边信息生成模块发送的时间边信息帧与映射空间边信息帧进行信息融合后,将得到的融合信息帧发送至重构模块;重构模块,用于对融合模块发送的融合信息帧进行滤波,并根据Wyner‑Ziv解码器发送的Wyner‑Ziv解码帧、经过滤波的融合信息帧进行图像重建;所述空间信息生成模块包括:第二预处理单元、第二块匹配单元、空间边信息生成单元;其中,第二预处理单元,用于对来自所述第二帧内解码器的两个连续的第二关键解码帧进行低通滤波处理后,将得到的两个连续的第二关键滤波帧分别分割为五十个以上的大小为M×N的增强宏块,并将各增强宏块发送至第二块匹配单元;其中,M、N均表示像素点个数,且为自然数;第二块匹配单元,用于在第二预处理单元发送的各增强宏块中,根据MSE(r,s)≤γ进行搜索,并将搜索到的两个相互匹配的增强宏块发送至空间边信息生成单元;其中,匹配函数γ为设定值,且为实数;(r,s)表示两个任意增强宏块之间的运动矢量,(x,y)、(x+r,y+s)均表示像素点坐标;gl(x,y)表示两个连续的第二关键解码帧中的当前帧在(x,y)处的像素值;gl‑1(x+r,y+s)表示两个连续的第一关键解码帧中的前一帧在(x+r,y+s)处的像素值;空间边信息生成单元,用于对第二块匹配单元发送的两个相互匹配的增强宏块采用双向运动内插法进行处理,得到初始空间边信息帧将初始空间边信息帧V2m发送至所述融合模块;其中,V2m(q)表示初始空间边信息帧,q表示初始空间边信息帧中的像素坐标;U2m‑1表示两个相互匹配的宏块中属于两个连续的第一关键滤波帧中的前序第一关键滤波帧的宏块,U2m+1表示两个相互匹配的宏块中属于两个连续的第一关键滤波帧中的后序第一关键滤波帧的宏块;MVf2m表示前向运动矢量,MVb2m表示后向运动矢量,MVf2m、MVb2m均已知;所述融合模块包括第三预处理单元、特征点提取单元、基础矩阵生成单元、映射单元、信息融合单元;其中,第三预处理单元,用于对所述时间边信息生成模块发送的时间边信息帧、所述空间边信息生成模块发送的初始空间边信息帧进行滤波,并将得到的时间边信息滤波帧、初始空间边信息滤波帧发送至基础矩阵生成单元,同时,将时间边信息滤波帧、初始空间边信息滤波帧分别发送至融合单元、映射单元;特征点提取单元,用于在水平方向与垂直方向上,获取第三预处理单元发送的时间边信息滤波帧、初始空间边信息滤波帧分别对应的每个像素点亮度I(x,y)、I'(x,y)的梯度,分别如下:其中,表示卷积;之后,根据上述梯度对应构建基本自相关矩阵M、增强自相关矩阵M',分别为:
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国矿业大学,未经中国矿业大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201510883301.8/,转载请声明来源钻瓜专利网。