[发明专利]流传输服务中的体积内容分量子比特流的动态适配

说明书

媒体内容处理设备可以基于一个或多个消息来解码视觉体积内容，所述一个或多个消息可以指示参数集中指示的一个或多个属性子比特流中的哪个属性子比特流是活动的。所述参数集可以包括基于视觉体积视频的参数集。指示一个或多个活动属性子比特流的所述消息可由解码器接收。解码器可以基于所述一个或多个消息执行解码，诸如确定使用哪个属性子比特流来解码视觉媒体内容。所述一个或多个消息可被产生并被发送到解码器，例如，以指示所述一个或多个属性子比特流的去激活。所述解码器可基于所述一个或多个消息，确定非活动属性子比特流，并跳过该非活动属性子比特流，以对视频媒体内容进行解码。

相关申请的交叉参考

本申请要求在2019年7月2日申请的、标题为“点云流传输服务中的点云分量子流的动态适配(Dynamic Adaptation of Point Cloud Component Substreams in PointCloud Streaming Services)”的美国临时专利申请62/869,705的优先权，其全部内容通过参考并入，如同在此完全阐述一样。

背景技术

视频译码系统可以用于压缩数字视频信号，例如，以减少这种信号所需的存储和/或传输带宽。视频译码系统可以包括例如基于小波的系统、基于对象的系统和/或基于块的系统，诸如基于块的混合视频译码系统。

发明内容

公开了用于动态适配视觉体积(volumetric)内容的系统、方法和手段，所述视觉体积内容诸如点云流传输服务中的点云分量子比特流。关于视觉体积内容的动态适配可以基于一个或多个消息和/或参数集，其可以指示视觉体积内容中的一个或多个改变。改变可以包括例如活动(active)属性和/或编解码器的改变。例如，流传输会话中的比特率适配过程可以(例如，基于操作环境，诸如资源可用性、带宽属性、客户端译码能力和/或客户端渲染能力)添加/丢弃视频分量的一个或多个属性和/或将视频分量的表示改变为利用不同编解码器编码的表示。可以生成一个或多个消息和/或参数集并将其发送到解码器，例如，以指示视觉体积内容处理信息，其可以包括变化指示。解码器可基于一个或多个消息和/或参数集，执行解码，例如确定使用哪一属性子比特流和/或编解码器来进行解码。

所述一个或多个消息和/或参数集可以包括例如分量编解码器改变(CCC)消息、活动属性(AA)消息、分量改变参数集(CCPS)和/或参数集激活(PSA)消息。例如，视觉体积内容比特流补充增强信息(SEI)消息和/或参数集可以支持关于视觉体积内容的适配流传输。消息(例如，CCC SEI消息)可以向解码器(例如，视觉体积内容解码器)通知对一个或多个视觉体积内容分量的编解码器改变，使得解码器能够确定哪些视频编解码器用于被参考的分量。消息(例如，AA SEI消息)可以通知解码器(例如，视觉体积内容解码器)关于一个或多个视觉体积内容分量的属性改变，使得解码器能够针对参考的分量，确定使用哪些活动属性以及忽略哪些非活动(inactive)属性。参数集(例如，CCPS)可以包括关于相对于参数集(例如，序列参数集(SPS))对一个或多个视觉体积内容分量做出的改变(例如，属性或编解码器)的信息，使得解码器能够确定哪些视频编解码器和活动属性用于所参考的分量。消息(例如，PSA SEI消息)可以指示哪些参数集对于所述视觉体积内容分量是活动的，使得解码器能够确定哪些视频编解码器和活动属性用于被参考的分量。解码器可以例如基于消息和/或参数集，确定在与视觉体积内容相关联的参数集中指示的多个属性子比特流中的哪个属性子比特流是活动的，并且使用活动的属性子比特流来解码所述视觉体积内容。