[发明专利]基于三维地图重建和抽取的子图的超低比特率编码方法

说明书

本发明公开了一种超低速率视频编码方法，包括捕获视频流内的帧，捕获帧的全局位置，捕获帧的前进方向，将全局位置和前进方向链接到帧，基于帧的全局位置和帧的前进方向确定帧的前景，确定前景内的至少一个感兴趣区域，分析至少一个感兴趣区域，基于全局位置和前进方向从帧中移除背景，其中背景与前景是互补的，并编码前景、全局位置、前进方向和至少一个感兴趣区域。

技术领域

本公开内容可适用于与高级驾驶员辅助系统(ADAS)一起使用的超低比特率编码法，其中跳过对背景对象的编码并且对前景中的感兴趣区域对象进行编码。

背景技术

用于高级驾驶员辅助系统的当前编码方法对在整个场景中的对象进行编码，所述场景包括静态背景对象。在编码过程中包含背景对象的这种方法需要处理和存储大量对于驾驶员来说微不足道的信息。

发明内容

在一个实施例中，一种超低速率视频编码的方法，包括捕获视频流内的帧，捕获帧的全局位置(global position)，捕获帧的前进方向(heading)，将全局位置和前进方向链接到帧，基于帧的全局位置和帧的前进方向确定帧的前景(foreground)，确定前景内的至少一个感兴趣区域，分析该至少一个感兴趣区域，基于全局位置和前进方向从帧中移除背景，其中背景(background)与前景是互补的，并且对前景、全局位置、前进方向和该至少一个感兴趣区域进行编码。

在另一个实施例中，一种超低速率视频解码的方法，包括解码视频流内的帧的已编码前景，其中已编码前景至少包括帧的全局位置和帧的前进方向，提取帧的全局位置和帧的前进方向，基于帧的全局位置和帧的前进方向接收局部图像，并混合局部图像和前景。

附图说明

在附图中：

图1是根据本公开的一个实施例的第一系统布局；

图2是根据本公开的一个实施例的第二系统布局；

图3是视频流的未修改帧的图示；

图4是根据本公开的一个实施例的具有一般对象识别的视频流的帧的图示；

图5是根据本公开的一个实施例的移除了背景的视频流的帧的图示；

图6是根据本公开的一个实施例的视频流的帧的第一图示，其中识别了背景、前景和感兴趣区域；

图7是根据本公开的一个实施例的视频流的帧的第二图示，其中识别了背景、前景和感兴趣区域；

图8是根据本公开的一个实施例的编码流程图；

图9是根据本公开的一个实施例的第一编码方法；

图10是根据本公开的一个实施例的第二编码方法；

图11是根据本公开的一个实施例的第一解码方法；和

图12是根据本公开的一个实施例的第二解码方法。

具体实施方式

以下列出的实施例仅用于示出该装置和方法的应用，而不是限制范围。对该装置和方法的等同形式的修改应被归类为权利要求的范围内。

现代3D投影技术提供了静态场景的详细信息，如建筑物、街道和高速公路。3D街景视图提供道路以及周围建筑物的高分辨率图像。

在扩展的视觉应用中，该系统集成了视觉(图像/视频)作为主要数据输入，其与雷达、激光雷达、红外线、全球定位系统(GPS)等其他信息相结合，以提供额外的数据输入。