[发明专利]多媒体数据的处理方法、装置、设备及系统

说明书

技术领域

本发明实施例涉及无线通信技术，尤其涉及一种多媒体数据的处理方法、装置、设备及系统。

背景技术

随着智能移动终端的普及以及无线网络带宽的提升，终端用户对于视频传输的需求也在不断增加。现在用户比较熟悉的视频传输有两种，一种是非实时的，另一种是实时的。非实时的视频传输的一种方式，适用于近距离视频传输，是先将视频拍摄好，然后终端之间通过蓝牙等传输方式将视频从一个终端传输到另一个终端上，这种传输方式所接收到的视频的质量较好，但是要求发送方和接收方处于有限距离内；另一种方式，适用于远距离视频传输，是发送终端将拍摄好的视频上传到服务器，另一个终端再从服务器上下载视频内容，比如微信，这种非实时传输的视频的质量较低，拍摄的视频的时间长度较短。实时传输的视频，比如现有的qik和facetime技术，这一类的视频传输保证了传输的实时性，即接收端可以实时的观看到发送方所拍摄的视频。

现有实时传输视频技术中，当用户A和用户B建立连接后，用户A采集音视频数据，对音视频数据进行编码压缩,将压缩后的音视频数据封装成IP包，通过网络发送向用户B，在发送数据过程中，用户A接收到用户B所反馈的数据接收情况报文，从而获知网络的情况，用户A会根据获知的网络情况调整用户A的编码输出码率，当网络带宽下降的时候，用户A调整编码参数，输出低码率的码流；当网络带宽提升时，用户A调整编码参数，输出高码率的数据流，用户A的码率和带宽的调整情况如图1所示。图1为现有技术中数据流码率随带宽的调整情况示意图，x轴是时间，单位是秒；y轴是比特率，单位是kbps。

由图1可以看出，现有实时视频传输技术中，当网络带宽下降时，发送端会调整编码参数以输出低码率的码流，从而在低网络带宽时保证音视频传输连续性，实现音视频的实时传输，在实时传输过程中，服务器会相应保存传输过程中的视频数据以供非实时用户获取该视频数据，但是采用现有技术的实时视频传输技术时，由于受网络带宽的影响，传输过程中的视频数据的质量存在波动，当网络带宽下降时，服务器保存的视频数据为实时传输过程中的低码率数据，这样即使网络带宽提升时非实时用户重新观看网络带宽下降时服务器保存的视频数据，该非实时用户仍然无法获取高质量的视频数据。

发明内容

本发明实施例提供一种多媒体数据的处理方法、装置、设备及系统。

第一方面，本发明实施例提供一种多媒体数据的发送方法，包括：

获取编码参考信息，若判断获知所述编码参考信息满足预设条件，则对待编码数据进行编码并分别获得第一分段数据和第二分段数据，其中所述第一分段数据的质量高于所述第二分段数据的质量；

将所述第一分段数据发送至增强分段发送队列中，将所述第二分段数据发送至所述实时分段发送队列中；

在优先保证所述第二分段数据及时发送的前提下，将所述第一分段数据和所述第二分段数据发送给服务器，以供所述服务器根据所述第二分段数据为用户提供实时数据业务，并应用所述第一分段数据和对应的所述第二分段数据为用户提供非实时数据业务。

结合第一方面，在第一方面的第一种可能实现的方式中，所述在优先保证所述第二分段数据及时发送的前提下，将所述第一分段数据和所述第二分段数据发送给服务器，包括：

向所述服务器发送所述第二分段数据；

在发送所述第二分段数据的空闲时间内、或在发送完所述第二分段数据后、或利用发送所述第二分段数据所剩余的网络带宽，向所述服务器发送所述第一分段数据。

结合第一方面或者第一方面的第一种可能实现的方式，在第一方面的第二种可能实现的方式中，所述应用所述第一分段数据和对应的所述第二分段数据为用户提供非实时数据业务，包括：

应用所述第一分段数据代替对应的所述第二分段数据为用户提供非实时数据业务；或者

将所述第一分段数据和对应的所述第二分段数据进行合并生成第四分段数据，应用所述第四分段数据代替对应的所述第二分段数据为用户提供非实时数据业务。

结合第一方面，在第一方面的第三种可能实现的方式中，所述方法还包括：

若判断获知所述编码参考信息不满足预设条件，则对待编码数据进行编码并仅获得第三分段数据，其中所述第三分段数据的码率高于所述第二分段数据的码率，并将所述第三分段数据发送至所述实时分段发送队列中以发送给所述服务器。

结合第一方面的第三种可能实现的方式，在第一方面的第四种可能实现的方式中，所述在优先保证所述第三分段数据及时发送的前提下，将所述第一分段数据和所述第三分段数据发送给服务器，包括：