[发明专利]一种分布式视频编码框架有效

专利信息
申请号: 201510883301.8 申请日: 2015-12-04
公开(公告)号: CN105430406B 公开(公告)日: 2018-06-12
发明(设计)人: 程德强;陈刚;姜海龙;寇旗旗;徐祖倩;刘海;张国鹏;郭星歌 申请(专利权)人: 中国矿业大学
主分类号: H04N19/30 分类号: H04N19/30
代理公司: 北京远创理想知识产权代理事务所(普通合伙) 11513 代理人: 卫安乐
地址: 22111*** 国省代码: 江苏;32
权利要求书: 查看更多 说明书: 查看更多
摘要: 发明提供一种分布式视频编码框架,包括:基本视点、增强视点、Wyner‐Ziv编码器、Wyner‐Ziv解码器、第一帧内编码器、第一帧内解码器、时间边信息生成模块、第二帧内编码器、第二帧内解码器、空间边信息生成模块、融合模块、重构模块;其中,基本视点、增强视点为采集设备,Wyner‐Ziv编码器与解码器、第一帧内编码器与解码器、第二帧内编码器与解码器分别对第一Wyner‐Ziv帧、第一关键帧、第二关键帧编码与解码;时间边信息生成模块、空间边信息生成模块分别生成时间边信息帧、空间边信息帧;融合模块对时间边信息帧与空间边信息帧进行融合后,由重构模块进行图像重建。本发明能适应恶劣复杂的环境,具有较高的容错性与普遍适用性,可广泛应用于矿业领域。
搜索关键词: 解码器 边信息生成 帧内编码器 边信息帧 分布式视频编码 基本视点 融合模块 重构模块 编码器 关键帧 帧内 视点 普遍适用性 解码 采集设备 矿业领域 图像重建 框架本 容错性 融合 应用
【主权项】:
一种分布式视频编码框架,其特征在于,所述编码框架包括基本视点、增强视点、Wyner‑Ziv编码器、Wyner‑Ziv解码器、第一帧内编码器、第一帧内解码器、时间边信息生成模块、第二帧内编码器、第二帧内解码器、空间边信息生成模块、融合模块、重构模块;其中,基本视点,用于采集第一环境视频图像,根据第一环境视频图像的序号将第一环境视频图像分为第一Wyner‑Ziv帧与第一关键帧,将第一Wyner‑Ziv帧、第一关键帧分别发送至Wyner‑Ziv编码器、第一帧内编码器;增强视点,用于采集第二环境视频图像,根据第二环境视频图像的序号将第二环境视频图像分为第二Wyner‑Ziv帧与第二关键帧,将第二关键帧发送至第二帧内编码器;Wyner‑Ziv编码器,用于对基本视点发送的第一Wyner‑Ziv帧进行去除像素间相关性的离散余弦变换,对将变换系数量化后形成的位平面进行信道编码,并将得到的Wyner‑Ziv编码帧通过无线信道发送至Wyner‑Ziv解码器;Wyner‑Ziv解码器,用于对Wyner‑Ziv编码器发送的Wyner‑Ziv编码帧进行解码,并将Wyner‑Ziv解码帧发送至重构模块;第一帧内编码器,用于对基本视点发送的第一关键帧进行H.264帧内编码,并将得到的第一关键编码帧通过无线信道发送至第一帧内解码器;第一帧内解码器,用于对第一帧内编码器发送的第一关键编码帧进行H.264帧内解码,并将得到的第一关键解码帧发送至时间边信息生成模块;时间边信息生成模块,用于对来自第一帧内解码器的两个连续的第一关键解码帧依次进行预处理、块匹配、双向运动内插后,将生成的时间边信息帧发送至融合模块;第二帧内编码器,用于对增强视点发送的第二关键帧进行H.264帧内编码,并将得到的第二关键编码帧通过无线信道发送至第二帧内解码器;第二帧内解码器,用于对第二帧内编码器发送的第二关键编码帧进行H.264帧内解码,并将得到的第二关键解码帧发送至空间信息生成模块;空间边信息生成模块,用于根据第二帧内解码器发送的第二关键解码帧进行运动估计,将得到的初始空间边信息帧发送至融合模块;融合模块,用于根据基本视点与增强视点之间的相关性,通过基础矩阵将空间边信息生成模块发送的初始空间边信息帧映射到基本视点,得到映射空间边信息帧,并采用平均内插法对时间边信息生成模块发送的时间边信息帧与映射空间边信息帧进行信息融合后,将得到的融合信息帧发送至重构模块;重构模块,用于对融合模块发送的融合信息帧进行滤波,并根据Wyner‑Ziv解码器发送的Wyner‑Ziv解码帧、经过滤波的融合信息帧进行图像重建;所述空间信息生成模块包括:第二预处理单元、第二块匹配单元、空间边信息生成单元;其中,第二预处理单元,用于对来自所述第二帧内解码器的两个连续的第二关键解码帧进行低通滤波处理后,将得到的两个连续的第二关键滤波帧分别分割为五十个以上的大小为M×N的增强宏块,并将各增强宏块发送至第二块匹配单元;其中,M、N均表示像素点个数,且为自然数;第二块匹配单元,用于在第二预处理单元发送的各增强宏块中,根据MSE(r,s)≤γ进行搜索,并将搜索到的两个相互匹配的增强宏块发送至空间边信息生成单元;其中,匹配函数γ为设定值,且为实数;(r,s)表示两个任意增强宏块之间的运动矢量,(x,y)、(x+r,y+s)均表示像素点坐标;gl(x,y)表示两个连续的第二关键解码帧中的当前帧在(x,y)处的像素值;gl‑1(x+r,y+s)表示两个连续的第一关键解码帧中的前一帧在(x+r,y+s)处的像素值;空间边信息生成单元,用于对第二块匹配单元发送的两个相互匹配的增强宏块采用双向运动内插法进行处理,得到初始空间边信息帧将初始空间边信息帧V2m发送至所述融合模块;其中,V2m(q)表示初始空间边信息帧,q表示初始空间边信息帧中的像素坐标;U2m‑1表示两个相互匹配的宏块中属于两个连续的第一关键滤波帧中的前序第一关键滤波帧的宏块,U2m+1表示两个相互匹配的宏块中属于两个连续的第一关键滤波帧中的后序第一关键滤波帧的宏块;MVf2m表示前向运动矢量,MVb2m表示后向运动矢量,MVf2m、MVb2m均已知;所述融合模块包括第三预处理单元、特征点提取单元、基础矩阵生成单元、映射单元、信息融合单元;其中,第三预处理单元,用于对所述时间边信息生成模块发送的时间边信息帧、所述空间边信息生成模块发送的初始空间边信息帧进行滤波,并将得到的时间边信息滤波帧、初始空间边信息滤波帧发送至基础矩阵生成单元,同时,将时间边信息滤波帧、初始空间边信息滤波帧分别发送至融合单元、映射单元;特征点提取单元,用于在水平方向与垂直方向上,获取第三预处理单元发送的时间边信息滤波帧、初始空间边信息滤波帧分别对应的每个像素点亮度I(x,y)、I'(x,y)的梯度,分别如下:其中,表示卷积;之后,根据上述梯度对应构建基本自相关矩阵M、增强自相关矩阵M',分别为:<mrow><mi>M</mi><mo>=</mo><mfenced open = "[" close = "]"><mtable><mtr><mtd><msup><mrow><mo>(</mo><mfrac><mrow><mo>&part;</mo><mi>I</mi><mrow><mo>(</mo><mi>x</mi><mo>,</mo><mi>y</mi><mo>)</mo></mrow></mrow><mrow><mo>&part;</mo><mi>x</mi></mrow></mfrac><mo>)</mo></mrow><mn>2</mn></msup></mtd><mtd><mrow><mfrac><mrow><mo>&part;</mo><mi>I</mi><mrow><mo>(</mo><mi>x</mi><mo>,</mo><mi>y</mi><mo>)</mo></mrow></mrow><mrow><mo>&part;</mo><mi>x</mi></mrow></mfrac><mo>&CenterDot;</mo><mfrac><mrow><mo>&part;</mo><mi>I</mi><mrow><mo>(</mo><mi>x</mi><mo>,</mo><mi>y</mi><mo>)</mo></mrow></mrow><mrow><mo>&part;</mo><mi>y</mi></mrow></mfrac></mrow></mtd></mtr><mtr><mtd><mrow><mfrac><mrow><mo>&part;</mo><mi>I</mi><mrow><mo>(</mo><mi>x</mi><mo>,</mo><mi>y</mi><mo>)</mo></mrow></mrow><mrow><mo>&part;</mo><mi>x</mi></mrow></mfrac><mo>&CenterDot;</mo><mfrac><mrow><mo>&part;</mo><mi>I</mi><mrow><mo>(</mo><mi>x</mi><mo>,</mo><mi>y</mi><mo>)</mo></mrow></mrow><mrow><mo>&part;</mo><mi>y</mi></mrow></mfrac></mrow></mtd><mtd><msup><mrow><mo>(</mo><mfrac><mrow><mo>&part;</mo><mi>I</mi><mrow><mo>(</mo><mi>x</mi><mo>,</mo><mi>y</mi><mo>)</mo></mrow></mrow><mrow><mo>&part;</mo><mi>y</mi></mrow></mfrac><mo>)</mo></mrow><mn>2</mn></msup></mtd></mtr></mtable></mfenced><mo>,</mo><msup><mi>M</mi><mo>&prime;</mo></msup><mo>=</mo><mfenced open = "[" close = "]"><mtable><mtr><mtd><msup><mrow><mo>(</mo><mfrac><mrow><mo>&part;</mo><msup><mi>I</mi><mo>&prime;</mo></msup><mrow><mo>(</mo><mi>x</mi><mo>,</mo><mi>y</mi><mo>)</mo></mrow></mrow><mrow><mo>&part;</mo><mi>x</mi></mrow></mfrac><mo>)</m</div> </div> <div class="b20"></div> <div class="down-box" id="down-box"> <div class="msg" style="display: block;"> <span>下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。</span> </div> <div class="btns"> <span class="btn paydown">免登录下载</span><a href="/login.html?p=8684656C99F5006F9B21002C27F0C936B1A471EB536FE7F8" class="btn green" target="_blank">普通用户下载</a><a href="http://yh.vipzhuanli.com/member/service/pay-vip.html?p=v1" target="_blank" class="btn red">升级VIP会员,免费下载</a> </div> </div> <div class="warning"> <p>该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国矿业大学,未经中国矿业大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【<a href="https://wpa1.qq.com/l11yQAzu?_type=wpa&qidian=true">客服</a>】</p> <p>本文链接:http://www.vipzhuanli.com/patent/201510883301.8/,转载请声明来源钻瓜专利网。</p> </div> <ul class="clear_div other_o"><li class="prev">上一篇:<a href="/patent/201510703272.2/" title="执行帧内预测的视频解码/编码方法和装置">执行帧内预测的视频解码/编码方法和装置</a></li><li class="next">下一篇:<a href="/patent/201510929067.8/" title="一种图像传感器坏点检测和校正的方法及装置">一种图像传感器坏点检测和校正的方法及装置</a></li></ul> <div class="oth-box"> <dl class="d_th"><dd><span>同类专利</span></dd><dt class="th_a"></dt></dl> <dl class="d_th" style="padding-top:15px;"><dd><span>专利分类</span></dd></dl> <div class="ps_c"> <div><a href="/ipc/H/" target="_blank" title="电学">H 电学</a></div><a class="ml1" href="/ipc/H04/" target="_blank" title="电通信技术">H04 电通信技术</a><br/><a class="ml2" href="/ipc/H04N/" target="_blank" title=" 图像通信,如电视">H04N 图像通信,如电视</a><br/> </div> </div> </div> <div class="content-r"> <div class="btns content-list" id="downdd"> <div class="header"> <div class="header-title"><a >专利文件下载</a></div> <hr /> </div> <span class="btn paydown">免登录下载</span><a href="/login.html?p=8684656C99F5006F9B21002C27F0C936B1A471EB536FE7F8" class="btn green" target="_blank">普通用户下载</a><a href="http://yh.vipzhuanli.com/member/service/pay-vip.html?p=v1" target="_blank" class="btn red">升级VIP会员,免费下载</a> </div> <div class="content-list"> <div class="header"> <div class="header-title"><a href="/patent/list.html?kw=%e8%a7%a3%e7%a0%81%e5%99%a8 ">解码器 相关专利</a></div> <hr /> </div> <ul> <li><a href="/patent/200610140374.9/">图像处理装置、图像处理方法、记录介质和程序</a></li> <li><a href="/patent/200710104735.9/">用于升级编解码器的设备和方法</a></li> <li><a href="/patent/201380079480.9/">一种解码输入信号的turbo解码器</a></li> <li><a href="/patent/201710388113.7/">解码器资源分配方法及装置</a></li> <li><a href="/patent/201710952559.8/">一种影碟机的集成解码装置</a></li> <li><a href="/patent/201710967055.3/">一种亮度调节电路的电视机解码系统</a></li> <li><a href="/patent/201910198887.2/">具有混合解码方案的存储器系统及其操作方法</a></li> <li><a href="/patent/201910204733.X/">视频解码、播放方法、装置、系统、终端及存储介质</a></li> <li><a href="/patent/201922214771.1/">数字多层视频信号解码器</a></li> <li><a href="/patent/202021667570.3/">卫星直播系统综合接收解码器</a></li> </ul> </div> <div class="content-list"> <div class="header"> <div class="header-title"><a href="/patent/list.html?kw=%e8%be%b9%e4%bf%a1%e6%81%af%e7%94%9f%e6%88%90 ">边信息生成 相关专利</a></div> <hr /> </div> <ul> <li><a href="/patent/200780024233.3/">用于编码和解码基于对象的音频信号的方法和装置</a></li> <li><a href="/patent/201210295861.8/">交换镜头及相机系统</a></li> <li><a href="/patent/201210469984.9/">多视角分布式视频压缩的边信息生成方法</a></li> <li><a href="/patent/201410326002.X/">分布式视频编码边信息生成方法</a></li> <li><a href="/patent/201510883301.8/">一种分布式视频编码框架</a></li> <li><a href="/patent/201810180440.8/">轨迹生成方法及装置、终端</a></li> <li><a href="/patent/201911327964.6/">一种图数据生成方法、装置、服务器及存储介质</a></li> <li><a href="/patent/202110191126.1/">数据生成方法及数据生成装置</a></li> <li><a href="/patent/202110255421.9/">一种基于边信息增强的属性网络嵌入方法及系统</a></li> <li><a href="/patent/202110560049.2/">文字特效的生成方法、装置、电子设备及存储介质</a></li> </ul> </div> <div class="content-list"> <div class="header"> <div class="header-title"><a href="/patent/list.html?kw=%e5%b8%a7%e5%86%85%e7%bc%96%e7%a0%81%e5%99%a8 ">帧内编码器 相关专利</a></div> <hr /> </div> <ul> <li><a href="/patent/200480024621.8/">隔行扫描视频的高级双向预测编码</a></li> <li><a href="/patent/201010169821.X/">隔行扫描视频的高级双向预测编码</a></li> <li><a href="/patent/201010170158.5/">隔行扫描视频的高级双向预测编码</a></li> <li><a href="/patent/201010170160.2/">隔行扫描视频的高级双向预测编码</a></li> <li><a href="/patent/201210055895.X/">一种立体编码、解码装置及系统</a></li> <li><a href="/patent/201210249214.3/">基于帧级编码端速率控制的变换域分布式视频编解码器</a></li> <li><a href="/patent/201210301640.7/">经由视频信道传输多个视频流的方法和装置</a></li> <li><a href="/patent/201510883301.8/">一种分布式视频编码框架</a></li> <li><a href="/patent/201611216429.X/">视频编码方法和视频编码器系统</a></li> <li><a href="/patent/201810291486.7/">视频编码中一种快速编码方法</a></li> </ul> </div> <div class="content-list"> <div class="header"> <div class="header-title"><a href="/patent/list.html?kw=%e8%be%b9%e4%bf%a1%e6%81%af%e5%b8%a7 ">边信息帧 相关专利</a></div> <hr /> </div> <ul> <li><a href="/patent/201110247616.5/">一种基于边信息精化的分布式视频编码及解码方法</a></li> <li><a href="/patent/201410326002.X/">分布式视频编码边信息生成方法</a></li> <li><a href="/patent/201410536223.X/">一种边信息生成方法及装置</a></li> <li><a href="/patent/201510883301.8/">一种分布式视频编码框架</a></li> <li><a href="/patent/201610428712.2/">一种基于分层WZ帧的小波域分布式多视点视频编码</a></li> <li><a href="/patent/201710647310.6/">一种物联网下的3D会议视频解码方法、装置及系统</a></li> <li><a href="/patent/201910376206.7/">一种联合边信息的分布式视频压缩采样重建方法</a></li> <li><a href="/patent/202010187089.2/">基于丢失块修复的分布式多视点视频解码的方法和装置</a></li> <li><a href="/patent/202110279444.3/">边海防监控方法、边缘设备、系统及计算机可读存储介质</a></li> <li><a href="/patent/202110560049.2/">文字特效的生成方法、装置、电子设备及存储介质</a></li> </ul> </div> </div> </div> </div> <input type="hidden" id="hid_id" /> <script type="text/javascript"> /* <![CDATA[ */ var pat_ajax_url = "/down/check.html"; var wppay_ajax_url = "/pay/down"; var pnum = "201510883301.8"; var openNo = "CN105430406B"; var op = "20180612"; var y = "2018"; /* */
×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

tel code back_top