[发明专利]经对象检测所通知的编码

说明书

背景技术

本发明涉及视频编码，并且具体地涉及节省带宽同时保存图像质量的视频编码技术。

视频编码/解码系统正被部署在种类日益增加的消费设备中。视频编解码器可见于例如现代智能电话和平板电脑中，其中通信带宽由无线网络或提供相对低且不可预测的带宽的其他基础结构来提供。此类应用明显不同于其中大得多的带宽可用于已编码视频数据的其他编解码器应用，诸如例如DVD播放器。因此，此类编解码器的现代应用对编解码器设计者提出了较高的性能要求，以尽可能多地降低已编码视频的比特率同时仍提供良好的图像质量。

发明人觉察到本领域对视频编码器的需要，该视频编码器识别视频帧内的感兴趣对象并选择编码参数以提供包括这些对象的区域的高质量编码，节省帧的其他区域的带宽，以及提供各个区域之间的平滑编码转换。

附图说明

图1示出了根据本发明的一个实施例的视频编码系统的简化框图。

图2示出了根据本发明的一个实施例的可由视频编码器处理的视频数据的示例性帧。

图3示出了根据本发明的一个实施例的对视频数据的一个帧的像素块进行编码的方法。

图4-6示出了应用于图2所示的帧数据的本发明的各种实施例的例子。

图7示出了根据本发明的一个实施例的像素块编码系统的简化框图。

具体实施方式

本发明的实施例提供用于基于对视频序列内的对象的检测来有效地对视频数据进行编码的技术。根据这些实施例，视频编码器可对帧执行对象检测，并且在检测到对象时产生该对象所在的帧的区域的统计值。视频编码器可将邻近于所述对象位置的像素与所述对象的统计值进行比较并且可定义对象区域以包括对应于所述对象位置的像素块以及对应于具有与所检测对象类似的统计值的相邻像素的像素块。编码器可根据基于块的压缩算法来对视频帧进行编码，其中对象区域的像素块根据生成相对高质量编码的编码参数而被编码，并且对象区域外的像素块根据生成相对较低质量编码的编码参数而被编码。

其他实施例提供更复杂的编码技术。例如，视频编码器可从各个像素块内将为所检测对象部分的像素块部分与不为所检测对象部分的像素块的其他部分加以区分。这些实施例可进一步向像素块的不同部分应用预处理操作，以保存对属于所检测对象的部分的高质量编码并且提供对非对象部分的高压缩编码。例如，编码器可在编码之前向像素块的非对象部分应用模糊滤波器。

图1(a)示出了根据本发明的一个实施例的视频编码系统100的简化框图。系统100可包括经由网络130互连的多个终端110,120。终端110,120各自可在局部位置捕捉视频数据并对视频数据进行编码以用于经由网络130传输至另一个终端。每个终端110,120可从网络130接收另一个终端的已编码视频数据，对已编码数据进行解码并显示复原的视频数据。

在图1(a)中，将终端110,120示出为智能电话，但本发明的原理并不限于此。本发明的实施例可应用于个人计算机(台式计算机和膝上型计算机两者)、平板电脑、计算机服务器、媒体播放器和/或专用视频会议设备。网络130表示在终端110,120之间传递已编码视频数据的任意数量的网络，包括例如有线通信网络和/或无线通信网络。通信网络130可在电路交换信道和/或分组交换信道中交换数据。代表性网络包括电信网、局域网、广域网和/或互联网。出于本论述的目的，除非下文作出解释，否则网络130的体系结构和拓扑结构对本发明的操作是无关紧要的。

图1(b)进一步示出了在系统100中可操作的视频编码器140和解码器150的功能框图。终端110可包括照相机160、视频编码器140和发射器170。视频编码器140可对在照相机160处捕捉的视频数据进行编码并可将已编码数据传送至由网络130提供的信道131。视频编码器140可基于视频数据的内容来选择编码参数。发射器170可将由视频编码器140提供的已编码视频数据与由音频编解码器或其他数据源(未示出)提供的一个或多个其他数据流进行合并，并且可调节数据以用于传输至另一个终端120。

第二终端120可包括接收器180、视频解码器150和显示器190。接收器180可接收来自信道131的数据，并将该信道数据解析成一个或多个各种数据流，包括已编码视频的流。视频解码器150可对已编码视频数据进行解码，从而使由视频编码器140执行的编码过程反转以从中复原视频数据。视频数据可由显示器190呈现，或者可被存储以供稍后使用。