[发明专利]媒体流数据的发送方法、电子装置和存储介质

说明书

本申请实施例涉及一种媒体流数据的发送方法、电子装置和存储介质，通过获取媒体流，媒体流包括属于多路视频流的帧数据，各路视频流的帧数据中携带有各帧数据的存储时间戳和各帧数据所属视频流的通道标识信息；多路视频流中各路视频流的存储时间戳基于相同时间基准确定；根据各帧数据的存储时间戳和通道标识信息，从媒体流中选取预设视频流的帧数据发送给客户端，其中，预设视频流中任意两组图像组的存储时间戳的起止时间均不重叠；如此，使得客户端的浏览器无需安装插件即可直接对由录播服务器发送的预设视频流进行解码和播放。

技术领域

本申请涉及多媒体数据处理技术领域，特别是涉及一种媒体流数据的发送方法、电子装置和计算机可读存储介质。

背景技术

视频会议系统包含作为视频会议服务器的多点控制单元（Multipoint ControlUnit，简称为MCU）以及软、硬终端、录播服务器等各类参与设备。终端采集图像、声音并经过编码发送给MCU。MCU则根据视频会议要求将多个终端发送的图像进行融合或不进行融合，声音混音或不混音后发送给各个参与终端，从而实现多方与会人的音视频通话。录播服务器通过模拟终端入会行为向MCU拉取多路媒体流后进行录像存储，以便后续提供给用户进行录像回放。

随着移动互联网的兴起，在移动终端的浏览器上无需安装插件即可及时点播视频会议录像的需求日益强烈。然而，在视频会议业务中，终端与MCU之间媒体流的交互往往包含多路视频流，比如一路会场摄像头采集的摄像视频流，一路笔记本电脑PPT演示的演示视频流；多路所述视频流的编码参数往往并不一致，此时浏览器无插件回放会议录像就变得十分困难。

相关技术中的一种针对包括多路视频流的媒体流数据的处理方法是，通过浏览器按一定条件进行不定期抽帧丢帧，实现音视频同步播放。然而，采用这种方式，将导致画面不定期卡顿，即丢失了部分视频数据。并且，浏览器端实现复杂，与第三方对接无法实现。

相关技术中的另一种方法为，通过流媒体服务器端不定期按一定条件进行丢帧或者延时发送，从而实现音视频同步发送。这种方式同样也会导致视频画面不定期卡顿，即丢失了部分视频数据。

针对上述问题，目前本领域中尚未提出有效的解决方案。

发明内容

有鉴于此，本申请实施例为解决背景技术中存在的至少一个问题而提供了一种媒体流数据的发送方法、电子装置和计算机可读存储介质。

第一方面，本申请实施例提供了一种媒体流数据的发送方法，应用于录播服务器，所述方法包括：

获取媒体流，所述媒体流包括属于多路视频流的帧数据，各路所述视频流的帧数据中携带有各帧数据的存储时间戳和各帧数据所属视频流的通道标识信息；多路视频流中各路所述视频流的存储时间戳基于相同时间基准确定；

根据各帧数据的所述存储时间戳和所述通道标识信息，从所述媒体流中选取预设视频流的帧数据发送给客户端，其中，所述预设视频流中任意两组图像组GOP的存储时间戳的起止时间均不重叠。

在其中一些实施例中，所述获取媒体流，具体包括：

获取单路复合媒体流，所述单路复合媒体流包括属于多路视频流的帧数据。

在其中一些实施例中，所述预设视频流的帧数据中携带有与所述存储时间戳相对应的扩展时间戳；所述存储时间戳在帧头中所占的二进制位数少于所述扩展时间戳所需占用的二进制位数；

在所述获取媒体流之后，所述方法还包括：将各路所述视频流中各帧数据的所述存储时间戳扩展为与所述扩展时间戳所需占用的二进制位数相同的二进制数。

在其中一些实施例中，所述将各路所述视频流中各帧数据的所述存储时间戳扩展为与所述扩展时间戳所需占用的二进制位数相同的二进制数，具体包括：