[发明专利]多码流处理及输出方法、设备及存储介质

说明书

本发明涉及多码流处理及输出方法、设备及存储介质，其中，处理方法的步骤包括：复用同一UVC传输通道输出多路码流数据。复用同一UVC传输通道输出多路码流数据，解决了现有UVC协议对于多码流数据传输的局限问题，同时由于输出至主机端设备的不是单一码流而是多路码流数据，因此也免除主机端设备对码流数据的转码和再编码，减轻主机端设备的CPU消耗。

技术领域

本发明涉及视频编码技术领域，更具体地，涉及多码流处理及输出方法、设备及存储介质。

背景技术

在视频会议场景或视频直播场景中，由于远端网络(即远端设备的网络条件或网络环境)会有较大的差异，需要对于同一个画面的视频数据一般会输出多路码流，以适应不同的远端网络。码流(Data Rate)指在1秒内通信端口在传输数据时高低电平变化的次数，也叫码率，单位时间内传送的数据越多，所包含的信息量也越多，则视频的画面质量越高。多码流技术通过在编码过程中同时产生多种不同码流及分辨率的流媒体数据，根据用户实际网络带宽条件为之自动分配相对最佳解码画质的解决方案。在实际网络直播/视频会议应用中，由于位于不同网络位置的访问者所在网络环境存在差异，而仅以某种固定码流分辨率进行网络直播流媒体传送往往会导致网速较高的用户看到的画质仍不够清晰，网速较低的用户解码时间过长而使得画面不够流畅，为解决二者的矛盾使访问者浏览到尽可能看到兼顾清晰和流畅的直播内容，采用多码流技术成为了一个最简单最有效的办法。

如图1所示，针对基于UVC协议进行数据传输的摄像设备(简称为UVC设备)，为了适应各种网络环境下的视频会议/直播客户端，一般是从UVC设备(如USB摄像设备)获取一路大码流的视频数据后(例如：1080p的视频数据)，使用主机端设备对该大码流数据转码后进行再次编码，从而形成多路码流数据(一般为3路)，以适应各个视频会议/直播客户端，如客户端的网络环境较好，则输出1080p的视频数据，如客户端的网络环境一般，则输出360p的视频数据，如此类推。由此可见，从UVC传输通道输入至主机端设备的码流数据需要依赖主机端设备进行转码后编码，但转码再编码的方式对于主机端CPU消耗很大，对其性能要求较高。如果将转码再编码的方式交由UVC设备在传输视频数据至主机端设备前完成，就能够大大减少主机设备的负担。但UVC设备是否能够完成视频数据的转码再编码，主要还是基于UVC协议的规则和标准，下文将详述UVC协议对多码流数据传输的支持情况：

UVC协议1.0版本不支持多路码流数据的传输，但可以通过多个UVC设备的复合模式从而达到多码流数据的输出，但缺点是由于每路视频需要2个端点资源，但目前主机端设备的端点资源都在4个以内，因此大多数的主机端设备无法支持两路以上的码流数据传输，且对于主机端设备来说，多个UVC设备不好控制。

UVC协议1.5版本支持多路码流数据的传输，但仍然需要增加端点资源的消耗，即每增加一路码流数据的传输，就需要增加一个端点资源。由于端点资源与UVC设备本身需要匹配，因此主流的UVC设备(如普通的USB设备)暂不支持该标准，且主机端设备的常用传输软件也不支持该标准，存在兼容性问题。

综合以上两个版本的UVC协议的局限以及现有技术所带来的未解决的问题可见，一种应用于UVC设备的新型多码流处理和传输方法亟待开发，能够同时解决上述的各项问题。

发明内容

本发明旨在克服上述现有技术的至少一种缺陷，提供多码流处理及输出方法、设备及存储介质，用于解决UVC设备的多码流数据传输局限问题，且免除主机端设备对码流数据的再编码，减轻主机端设备的CPU消耗。

本发明采用的技术方案为：

一种多码流处理方法，步骤包括：复用同一UVC传输通道输出多路码流数据。