[发明专利]一种透传自定义SEI的方法和装置

说明书

本发明公开了一种透传自定义SEI的方法和装置，属于视频处理技术领域。所述方法包括：接收目标音视频帧，解析所述目标音视频帧得到压缩数据结构以及自定义SEI，并将所述自定义SEI存储至预设数据存储结构；对所述压缩数据结构进行转码处理，并根据所述数据存储结构中的自定义SEI，生成添加有所述自定义SEI的新压缩数据结构；对所述新压缩数据结构进行封装生成新音视频帧，并输出所述新音视频帧。采用本发明，可以在对音视频帧进行ffmpeg转码过程中有效实现自定义SEI的透传处理。

技术领域

本发明涉及视频处理技术领域，特别涉及一种透传自定义SEI的方法和装置。

背景技术

伴随着互联网技术的发展以及宽带的不断提速，互联网与人们的生活联系的日益密切，观看直播已成为当下一种主流的娱乐形式。为了提高直播服务质量，直播平台的运营方多基于CDN(Content Delivery Network，内容分发网络)集群来提供直播服务，即主播端可以将直播的音视频数据传输至CDN集群，然后由CDN集群按照不同分辨率、码率等视频参数，通过ffmpeg对音视频数据进行转码，并将转码后的音视频数据分发给不同的观众端。

在直播过程中，主播端经常需要将消息事件传递给观众端，为了保证消息事件和直播的音视频数据的同步性，主播端往往将消息事件以自定义SEI(SupplementalEnhancement Information，补充增强信息)的格式插入到音视频流中，进而可以将自定义SEI和音视频数据一同传输至CDN集群。然而由于官方的ffmpeg版本不支持自定义SEI的透传功能，在转码过程中，自定义SEI往往会被CDN集群直接丢弃而无法透传至观众端，因此，目前亟需一种直播转码过程中实现自定义SEI透传的方法。

发明内容

为了解决现有技术的问题，本发明实施例提供了一种透传自定义SEI的方法和装置。所述技术方案如下：

第一方面，提供了一种透传自定义SEI的方法，所述方法包括：

接收目标音视频帧，解析所述目标音视频帧得到压缩数据结构以及自定义SEI，并将所述自定义SEI存储至预设数据存储结构；

对所述压缩数据结构进行转码处理，并根据所述数据存储结构中的自定义SEI，生成添加有所述自定义SEI的新压缩数据结构；

对所述新压缩数据结构进行封装生成新音视频帧，并输出所述新音视频帧。

可选的，所述将所述自定义SEI存储至预设数据存储结构，包括：

如果所述目标音视频帧对应的转码精确等级为高级，则将所述自定义SEI存储至所述压缩数据结构内增的预设SEI存储结构中；

如果所述目标音视频帧对应的转码精确等级为普通，则将所述自定义SEI存储至预设的全局链表结构中。

这样，针对不同的转码精确需求，采用不同的预设数据存储结构存储自定义SEI，可以保证高精度转码过程中自定义SEI添加的准确性，同时可以降低低精度转码过程中的设备资源消耗。

可选的，当所述预设数据存储结构为所述压缩数据结构内增的预设SEI存储结构时，所述对所述压缩数据结构进行转码处理，并根据所述数据存储结构中的自定义SEI，生成添加有所述自定义SEI的新压缩数据结构，包括：

将添加有所述自定义SEI的压缩数据结构输入解码器，解码得到解压数据结构和所述自定义SEI，并将所述自定义SEI添加至所述解压数据结构中；

将添加有所述自定义SEI的解压数据结构输入编码器，编码得到新压缩数据结构和所述自定义SEI，并将所述自定义SEI添加至所述新压缩数据结构中。

这样，在转码过程中的每个环节都进行自定义SEI的添加处理，可以保证自定义SEI添加的准确性。