[发明专利]图像处理装置和方法

说明书

本公开内容涉及用于抑制图像质量的降低的图像处理装置和方法。该图像处理装置和方法生成：布置了基本补丁的基本视频帧，基本补丁是通过将使具有三维形状的对象表示为点的集合的点云按照每个部分区域投影到二维平面上来获得的；以及布置了附加补丁的附加视频帧，附加补丁是在至少一部分参数相对于基本补丁的参数改变的情况下通过将包括与点云的基本补丁相对应的部分区域的至少一部分的部分区域投影到与基本补丁的二维平面相同的二维平面上来获得的。另外，该图像处理装置和方法对生成的基本视频帧和附加视频帧进行编码以生成编码数据。本公开内容例如可以应用于图像处理装置、电子设备、图像处理方法、程序等。

技术领域

本公开内容涉及图像处理装置和方法，并且更具体地，涉及能够抑制图像质量劣化的图像处理装置和方法。

背景技术

通常，将具有三维形状的对象表示为点的集合的点云数据的编码和解码已经由运动图像专家组(MPEG)进行标准化(例如，参见非专利文献1)。

此外，已经提出了如下方法(在下文中，也称为基于视频的方法)：将点云的几何数据和属性数据按照每个小区域投影到二维平面上、将投影在二维平面上的图像(补丁)布置在帧图像中并且通过用于二维图像的编码方法来编码帧图像(例如，参见非专利文献2至非专利文献4)。

引用列表

非专利文献

非专利文献1：“Information technology-MPEG-I(Coded Representation ofImmersive Media)-Part 9:Geometry-based Point Cloud Compression”,ISO/IEC23090-9:2019(E)

非专利文献2：Tim Golla and Reinhard Klein,“Real-time Point CloudCompression,”IEEE,2015

非专利文献3：K.Mammou,“Video-based and Hierarchical Approaches PointCloud Compression”,MPEG m41649,Oct.2017

非专利文献4：K.Mammou,“PCC Test Model Category 2 v0”N17248 MPEG outputdocument,October 2017

发明内容

本发明要解决的问题

然而，在非专利文献2至非专利文献4中描述的基于视频的方法的情况下，已经针对所有补丁统一地设置了信息的精度。即，信息的精度不能局部改变。因此，与能够局部改变信息的精度的情况相比，存在相同信息量的点云的质量劣化的可能性。因此，存在显示图像(在该显示图像中，通过对由基于视频的方法生成的编码数据进行解码而重建的点云被投影在二维平面上)的主观图像质量劣化的可能性。

本公开内容是鉴于这样的情况而做出的，并且其目的在于抑制用于显示3D数据的二维图像的图像质量的劣化。

问题的解决方案

根据本技术的一个方面的图像处理装置是包括如下的图像处理装置：视频帧生成单元，其被配置成生成布置了基本补丁的基本视频帧并且生成布置了附加补丁的附加视频帧，所述基本补丁是通过将使具有三维形状的对象表示为点的集合的点云按照每个部分区域投影到二维平面上来获得的，所述附加补丁是在使至少一部分参数与所述基本补丁的情况不同的情况下通过将包括与所述点云的基本补丁相对应的部分区域的至少一部分的部分区域投影到与所述基本补丁的情况相同的二维平面上来获得的；以及编码单元，其被配置成对由所述视频帧生成单元生成的所述基本视频帧和所述附加视频帧进行编码，以生成编码数据。