[发明专利]直播间连麦视频混流方法、存储介质、电子设备及系统

说明书

本发明公开了一种直播间连麦视频混流方法、存储介质、电子设备及系统，涉及互联网移动端应用开发领域，该方法包括异步的混流步骤和推流步骤。混流步骤包括：连麦发起客户端和被连麦客户端从服务器获取连麦参数；连麦发起客户端和被连麦客户端对连麦参数进行参数校验，若连麦参数无误，则均向服务器发送混流数据；服务器接收连麦发起客户端和连麦接收客户端的混流数据后，生成合成数据流以及混流视频地址，并向混流视频地址发送合成数据流。推流步骤包括：观众客户端获取推流参数；观众客户端生成播放窗口，并向服务器请求混流视频地址；观众客户端在获取混流视频地址后，从混流视频地址获取合成数据流，并在连麦窗口播放合成数据流。

技术领域

本发明涉及互联网移动端应用开发领域，具体涉及一种直播间连麦视频混流方法、存储介质、电子设备及系统。

背景技术

随着手机移动端的快速发展，在直播中很多地方都需要使用连麦技术。所谓的连麦是主播和主播/观众之间进行语音通话或者视频通话，所有的用户可以看到主播和主播/观众的视频通话或者语音通话，这样的技术叫做连麦技术。主播与主播/观众语音，所有的用户可以看到主播的语音这样的技术叫做语音连麦，主播和主播/观众进行视频，所有的用户能看到主播和主播/观众的视频，这样的技术叫做视频连麦，在连麦的过程中需要客户端和服务端，需要客户端和播放器模块多方面的协作，如果三者不能很好的配合就会出现连麦过程建立缓慢，用户体验差的情况。

连麦技术中比较核心的技术就是音视频混流，混流的过程包括解码，混流，编码，和推流这四个步骤。混流这个环节包括做抖动缓冲，目的是把多路流进行画面对齐和音画同步，同时通过缓冲对抗网络抖动，以便混合成一路流以后能够达到良好的效果。混流本身是一个相对比较耗费计算资源的运算，也是一个比较耗费时间的环节。说它耗费计算资源是因为这个过程涉及到多路流的实时转码，这是比较耗费CPU的事情。说它耗费时间，是因为这个环节涉及到抖动缓冲，会造成一定的延迟。实时转码本身耗费的时间一般会低于一帧的时间，相对不算显著；但是根据网络情况的不同，抖动缓冲会消耗大概80毫秒到1秒的时间。在连麦互动直播中，抖动缓冲造成的延迟对观众的体验十分关键。

然而，在连麦直播混流之前，从主播发起连麦到主播建立连麦用户就需要等待比较久的时间，相对于抖动延迟，这种等待是更加影响用户体验的。因此，为了解决上述问题，亟须了一种优化的连麦视频流建立的方案，在保证连麦的建立的同时，能够更快更可靠。

发明内容

针对现有技术中存在的缺陷，本发明的目的在于提供一种直播间连麦视频混流方法、存储介质、电子设备及系统，能够更快更可靠保证连麦的建立供观众观看，提升用户的观看体验。

为达到以上目的，第一方面，本发明实施例提供一种直播间连麦视频混流方法，其包括异步的混流步骤和推流步骤：

所述混流步骤包括：

连麦发起客户端和被连麦客户端从服务器获取连麦参数，所述连麦参数包括：当前直播间ID、连麦发起方ID、被连麦方ID；

连麦发起客户端和被连麦客户端对连麦参数进行参数校验，若所述连麦参数无误，则均向服务器发送混流数据；

所述服务器接收连麦发起客户端和连麦接收客户端的混流数据后，生成合成数据流以及混流视频地址，并向混流视频地址发送合成数据流；

所述推流步骤包括：

观众客户端获取推流参数，所述推流参数包括：连麦直播间ID、连麦发起方ID、连麦窗口参数；

观众客户端生成播放窗口，并向服务器请求混流视频地址；

观众客户端在获取混流视频地址后，从混流视频地址获取合成数据流，并在连麦窗口播放合成数据流。

作为一个可选的实施方案，还包括连麦发起步骤：

连麦发起客户端发起连麦请求；