[发明专利]直播视频流处理方法、装置、系统及计算机可读存储介质

说明书

本发明提供了一种直播视频流处理方法、装置、系统及计算机可读存储介质，属于网络技术领域。其中，发送端响应于多媒体插入指令，会获取目标多媒体数据，根据目标多媒体数据向直播视频流中视频帧的指定位置插入目标多媒体信息，最后对插入后的直播视频流进行编码，并发送给接收端，接收端可以对直播视频流进行解码播放。其中，该目标多媒体信息用于唯一表示目标多媒体数据，该指定位置为非数据体位置，本发明实施例中，由于不用将目标多媒体作为直播视频流的一部分，写入直播视频流中视频帧的数据体，进而就不用根据直播视频流的FPS值对目标多媒体的FPS值进行调整，进而可以避免降低目标多媒体的显示质量。

技术领域

本发明属于网络技术领域，特别是涉及一种直播视频流处理方法、装置、系统及计算机可读存储介质。

背景技术

随着网络技术的不断提升，网络直播逐渐成为一种主流的内容传播途径。为了丰富直播内容，以及直观表达观点和态度，主播往往会通过发送端向直播视频流中增加其他多媒体，例如，增加动画、图片或者音频，等等。然后对增加了多媒体的直播视频流编码，并发送给接收端，接收端对该增加了多媒体的直播视频流进行解码及渲染，即可使观众看到增加了多媒体的直播画面。

现有技术中，在需要向直播视频流中增加其他多媒体时，通常是由发送端先展示目标多媒体，然后在采集直播视频流的同时，采集目标多媒体的画面，使得显示有目标多媒体的画面对应的数据被写入直播视频流中视频帧的数据体中，进而实现将其作为直播视频流中的一部分内容，与直播视频流合成为一体，相应地，接收端对直播视频流进行播放时，显示的直播画面中可以呈现出增加的目标多媒体。

但是，受到直播场景的限制，直播视频流的每秒传输的帧数(FPS)值往往比较低，而为了保证目标多媒体能够与直播视频流正常合成，需要将目标多媒体的FPS值调整为与直播视频流的FPS值相适配的值，进而会降低直播画面中呈现出的目标多媒体的显示质量。

发明内容

本发明提供一种直播视频流处理方法、装置、系统及计算机可读存储介质，以便解决直播画面中呈现出的目标多媒体的显示质量较低的问题。

依据本发明的第一方面，提供了一种直播视频流处理方法，应用于包括发送端和接收端的系统，所述方法包括：

所述发送端响应于多媒体插入指令，获取目标多媒体数据；

所述发送端根据所述目标多媒体数据，向直播视频流中视频帧的指定位置插入目标多媒体信息；所述指定位置为非数据体位置，所述目标多媒体数据至少包括图片、动画及音频中的一种或多种；

所述发送端对插入后的所述直播视频流进行编码，并将编码后的所述直播视频流发送给接收端；

所述接收端对所述直播视频流进行解码，并从解码后的所述直播视频流中视频帧的指定位置提取目标多媒体信息；

所述接收端基于所述目标多媒体信息获取目标多媒体数据；

所述接收端对所述直播视频流进行渲染播放，并在对所述直播视频流中携带所述目标多媒体信息的视频帧进行渲染时，对所述目标多媒体数据进行渲染。

依据本发明的第二方面，提供了一种直播视频流处理方法，应用于发送端，所述方法包括：

响应于多媒体插入指令，获取目标多媒体数据；

根据所述目标多媒体数据，向直播视频流中视频帧的指定位置插入目标多媒体信息；所述指定位置为非数据体位置，所述目标多媒体数据至少包括图片、动画及音频中的一种或多种；

对插入后的所述直播视频流进行编码，并将编码后的所述直播视频流发送给接收端。

可选的，所述根据所述目标多媒体数据，向直播视频流中视频帧的指定位置插入目标多媒体信息，包括：