[发明专利]图像处理装置和方法

说明书

本公开内容涉及信息处理设备和方法，利用该信息处理设备和方法可以抑制解码点云的负荷的任何增加。在本公开内容中，生成与补块有关的辅助补块信息以与构成点云的规定时间方向区间的多个帧中的全部帧对应，在该补块中，针对每个部分区域将表示三维形状对象为一组点的点云投影到二维平面上；针对该区间中的每个帧使用所生成的辅助补块信息来生成补块；并且对布置有所生成的补块的帧图像进行编码。本公开内容可以应用于例如图像处理设备、电子设备、图像处理方法、程序等。

技术领域

本公开内容涉及图像处理装置和方法，并且具体地涉及能够抑制点云的解码负荷的增加的图像处理装置和方法。

背景技术

运动图像专家组(MPEG)已经常规地促进了将三维形状的对象表示为点的集合的点云数据的编码和解码的标准化(例如，参考非专利文献1)。

此外，已经提出了这样一种方法(下文中，也称为基于视频的方法)：针对每个小区域将点云的几何数据和属性数据投影到二维平面上，将投影在二维平面上的图像(补块(patch))布置为帧图像，以及使用用于二维图像的编码方法对帧图像进行编码(例如，参考非专利文献2至4)。

引用列表

非专利文献

非专利文献1：“Information technology-MPEG-I(Coded Representation ofImmersive Media)-Part 9:Geometry-based Point Cloud Compression”,ISO/IEC23090-9:2019(E)

非专利文献2：Tim Golla和Reinhard Klein,“Real-time Point CloudCompression”,IEEE,2015

非专利文献3：K.Mammou,“Video-based and Hierarchical Approaches PointCloud Compression”,MPEG m41649,2017年10月

非专利文献4：K.Mammou，“PCC Test Model Category 2v0”，N17248MPEG输出文件，2017年10月

发明内容

本发明要解决的问题

在非专利文献2至4中描述的基于视频的方法的情况下，对于每个帧，必须发送作为关于补块的信息的辅助补块信息，并且通过处理辅助补块信息可能增加施加在解码侧的负荷。

本公开内容是鉴于这种情况而设计的，并且能够抑制点云的解码负荷的增加。

问题的解决方案

根据本技术的一方面的图像处理装置包括：辅助补块信息生成单元，其被配置成以与包括在点云的时间方向上的预定区间中的多个帧中的所有帧对应的方式，生成辅助补块信息，该辅助补块信息是关于通过针对每个部分区域将点云投影到二维平面上而获得的补块的信息，该点云将三维形状对象表示为点的集合；补块生成单元，被配置成使用由辅助补块信息生成单元生成的辅助补块信息，针对区间中的每个帧生成补块；以及编码单元，被配置成对布置有由补块生成单元生成的补块的帧图像进行编码。

根据本技术的一方面的图像处理方法包括：以与包括在点云的时间方向上的预定区间中的多个帧中的所有帧对应的方式，生成辅助补块信息，该辅助补块信息是关于通过针对每个部分区域将点云投影到二维平面上而获得的补块的信息，该点云将三维形状对象表示为点的集合；使用所生成的辅助补块信息，针对区间中的每个帧生成补块；以及对布置有所生成的补块的帧图像进行编码。