[发明专利]一种图片封装方法、设备以及存储介质

说明书

本公开实施例公开一种图片封装方法、设备以及存储介质，所述方法包括：获取多个NAL单元，所述多个NAL单元包括图片的第一个NAL单元和图片的最后一个NAL单元；将图片的第一个NAL单元分割成多个第一片段，并将图片的最后一个NAL单元分割成多个最后片段；将多个第一片段封装成多个第一分片单元(FU)包，并将多个最后片段封装成多个最后FU包；以及发送多个第一FU包和多个最后FU包，其中，多个最后FU包中的最后FU包包括最后FU报头，该最后FU报头包括最后R比特，并且其中该最后R比特被设置为1。

交叉引用

本申请要求于2020年3月25日在美国专利商标局提交的第62/994,563号美国临时申请以及在2020年10月22日在美国专利商标局提交的第17/077,546号美国申请的优先权，其全部内容通过引用结合于此。

技术领域

所公开的主题涉及视频编码和解码，并且尤其涉及图片边界信息的信令，所述图片边界信息的信令用于支持视频有效载荷格式中的图片的单独存取。

背景技术

实时传输协议(RTP:Real-time Transport Protocol)是在IP网络上传递视频的网络协议，其已在利用流媒体的通信系统中使用，例如视频会议应用。RTP有效载荷格式最近受到关注，用于承载符合编码标准ITU-T建议[H.266]和ISO(InternationalOrganization for Standardization)/IEC(International ElectrotechnicalCommission)国际标准[ISO23090-3]的视频数据，这两种标准也称为下一代视频编码(VVC:Versatile Video Coding)并且由联合视频专家组(JVET:Joint Video Experts Team)开发。RTP有效载荷格式允许在每个RTP包(数据包)有效载荷中对至少一个网络抽象层(NAL:Network Abstraction Layer)单元进行封装，以及将NAL单元分片至多个RTP包(数据包)。

至少一些视频编码标准认识到存取单元(AU:Access Unit)的概念。在单层情况下，存取单元可以由单个编码的图片组成。在其它情况下，特别是那些涉及分层编码和多视角编码的情况下，AU可以包括共享某些定时信息例如具有相同的呈现时间的多个编码的图片。

RTP报头可以包括所谓的“标记”位(M比特(比特位))。按照惯例，在几乎所有RTP有效载荷格式中，对于携带AU的最后比特串的RTP包，M比特被指定为等于一，否则将其设置为零，所述RTP有效载荷格式可以识别AU的概念。当接收器接收到设置了M比特的RTP包时，它知道该RTP包是AU的最后一个数据包，并且可以相应地进行处理。这种处理的一些细节可以在RTP规范中找到。

至少一些视频编码标准进一步识别到编码的图片的概念，该已编码图片可以不同于AU。AU和编码图片可能不同，例如，如果AU由几个编码图片组成，则在使用空间或SNR可伸缩性时可能会有所不同；或在有多余图片的情况下会有所不同。

如果发送端点从存储设备/硬盘驱动器获取其发送视频码流，则这种文件可能不包括关于存取单元或已编码图片边界相关的容易存取的元信息，例如因为码流可以例如以通常称为“附录B码流”的格式存储。在这种场景下，可能没有可用的从编码器到RTP封装器的应用程序接口(API)信息，该API信息发信号通知比特流的比特串是AU的最终比特串或已编码图片的最终比特串。相反，RTP封装器可能必须识别所述比特串，所述比特串包括AU或已编码图片的末尾而没有通常可由编码器获取的辅助信息。

发明内容