[发明专利]一种多布局的云会议录制方法、系统和可读存储介质

说明书

本发明提供的一种多布局的云会议录制方法、系统和可读存储介质，其中方法包括：获取多个源视频数据；将所述多个源视频数据进行解码，得到每个源视频数据对应的YUV数据；将多个YUV数据按照预设的布局规则进行合成，得到第一YUV数据；将所述第一YUV数据进行编码，得到编码后的源视频数据；根据所述编码后的源视频数据生成视频文件。本申请根据所述编码后的源视频数据生成视频文件将不同源视频数据进行YUV转换，然后依照布局规则进行编码生成最终的视频文件，可以加快视频合成的速度，简化生成的流程，尤其在视频数量多，并且要求适应各种布局变化的情况，或者其他更复杂的情况下都能够适用。

技术领域

本申请涉及视频处理领域，更具体的，涉及一种多布局的云会议录制方法、系统和可读存储介质。

背景技术

云会议是基于云计算技术的一种高效、便捷、低成本的会议形式，可在世界各地使用多种终端方式如电话、手机、电脑、专用终端等通过共享音频、视频、终端桌面、文档、白板等进行远程沟通和远程协助。

云端录制MP4指的是在云服务器端接收远程客户端采集的实体图像数据和音频数据，通过云计算处理之后按MP4标准封装成可播放的MP4媒体文件。在客户端采集处理后发送到服务器端的数据是MP4的源数据，此处定义的源为云会议过程中共享的音频、视频、桌面、文档、白板等实例，源数据就是这些源所产生的数据，也是本服务所接受的数据。如一个摄像头采集到的数据对应一个源，多个摄像头采集到的数据对应多个源。单个源的MP4的生成流程很简单，采集图像数据，编码成H264格式数据，把H264数据按MP4标准写成MP4文件，这样能把多个源采集到的数据生成多个MP4文件，但要想把多个源的数据融合成一个MP4文件，按当前现有技术如ffmpeg命令、视频编辑的python库moviepy，还有其他软件工具是完全可行的，但都是基于单个源生成单个可播放媒体文件之后，再二次加工多个媒体文件融合成单个可播放的媒体文件的。此过程复杂、生成速度慢、生成之后的文件大，尤其在视频数量多，并且要求适应各种布局变化的情况，或者其他更复杂的情况下是没法适用的。

多布局意味着面对的是多个源，并且每个源在电脑屏幕上显示的位置随时可能发生变化，每个源的图像随时插入到正在显示的布局中，也随时都可能从布局中关闭。录制，意味着播放的时候是要还原现场，要保证多个源之间画面的同步关系，要保证多个画面同音频的同步关系。如何做到多个源在多布局的情况下以最直接最方便的形式正确的回放，那就需要设计专门的技术方案来生成一个能通过平常的播放器能够播放的媒体文件，如MP4文件。

在云会议过程中，不只是多个视频源的数据融合，更是有桌面、文档、白板、批注、参会人说话的声音、电脑播放的声音等数据参与融合，是一个比多源视频融合更复杂的场景。

发明内容

为了解决上述至少一个技术问题，本发明提出了一种多布局的云会议录制方法、系统和可读存储介质。

本发明第一方面提供了一种多布局的云会议录制方法，包括：

获取多个源视频数据；

将所述多个源视频数据进行解码，得到每个源视频数据对应的YUV数据；

将多个YUV数据按照预设的布局规则进行合成，得到第一YUV数据；

将所述第一YUV数据进行编码，得到编码后的源视频数据；

根据所述编码后的源视频数据生成视频文件。

本方案中，所述将多个YUV数据按照预设的布局规则进行合成，具体为：

获取预设布局规则的序号；

根据所述布局规则的序号查找预设的布局规则；

根据所述预设布局规则确定窗口的个数以及每个窗口对应的坐标数据信息；

确定每个窗口中每个源视频数据对应的YUV数据；