[发明专利]一种多路音视频的录像回放方法、装置、存储介质和电子设备

权利要求书

1.一种多路音视频的录像方法，其特征在于，包括：

获取进行多路音视频通信的多个设备的音频流和视频流；

将每个设备的音频流进行混音得到混音流，保存所述混音流，并保留时间戳信息；

将所述多个设备的视频流分别进行保存，并保留各自的时间戳信息。

2.根据权利要求1所述的录像方法，其特征在于，当保存所述混音流和所述视频流的设备为所述多个设备中的指定设备时，所述获取进行多路音视频通信的多个设备的音频流和视频流包括：

所述指定设备接收所述多个设备中除指定设备之外的其他设备发来的相应设备的音视频流，对所述音视频流解包后提取相应设备的视频流和音频流；所述第二设备采集并生成本地视频流和音频流。

3.根据权利要求2所述的录像方法，其特征在于，所述保存所述混音流包括：将所述混音流编码并打包后进行保存；

所述将所述多个设备的视频流分别进行保存包括：将所述其他设备的视频流打包后保存，将所述本地视频流编码并打包后进行保存。

4.根据权利要求1所述的录像方法，其特征在于，将所述混音流和所述每个设备的视频流打包保存到与每个设备对应的录像文件中。

5.根据权利要求1所述的录像方法，其特征在于，所述多路音视频通信为双路音视频通信，所述多路设备分别为第一设备和第二设备，所述混音流和所述多个设备的视频流均保存在所述第二设备中；

所述获取进行多路音视频通信的多个设备的音频流和视频流包括：

所述第二设备接收第一设备发来的第一设备的音视频流，对所述音频流进行解包后提取所述第一设备的音频流和视频流；所述第二设备采集并生成本地音频流和视频流；

所述将每个设备的音频流进行混音得到混音流包括：

将所述第一设备的音频流进行解码后与所述本地音频流进行混音处理，得到所述混音流；

保存所述混音流和多个设备的视频流的方式包括：

将所述混音流进行编码；

将编码后的混音流与所述第一设备的视频流打包保存到与第一设备对应的第一录像文件中，将所述本地视频流进行编码后与所述编码后的混音流打包保存到与第二设备对应的第二录像文件中。

6.一种多路音视频的回放方法，其特征在于，包括：

获取分别保存的进行多路音视频通信的多个设备的视频流及各自的时间戳信息；

获取保存的混音流及其时间戳信息；其中，所述混音流为所述多个设备的音频流进行混音后得到的音频流；

根据每个视频流的时间戳信息和所述混音流的时间戳信息，同步播放所述每个视频流和所述混音流。

7.根据权利要求6所述的回放方法，其特征在于，在同步播放所述每个视频流和所述混音流时，以所述混音流的播放进度为基准，所述每个视频流参照所述混音流的播放进度进行同步播放。

8.根据权利要求7所述的回放方法，其特征在于，任一路视频流参照所述混音流的播放进度进行同步播放的方式包括：

将V2-A2-(V0-A0)与SyncT进行比较，若V2-A2-(V0-A0)-SyncT，则确定所述任一路视频流的当前帧相对于上一帧的第一延时时间为V2-V1-λ1；若-SyncT≤V2-A2-(V0-A0)≤SyncT，则确定所述任一路视频流的当前帧相对于上一帧的第一延时时间为V2-V1；若V2-A2-(V0-A0)SyncT，则确定所述任一路视频流的当前帧相对于上一帧的第一延时时间为V2-V1+λ2；

将所述第一延时时间减去播放前处理的耗时时间作为延时同步时间，按照所述延时同步时间进行所述任一路视频流当前帧的播放；

其中，V2和A2分别为所述任一路视频流当前帧和所述混音流当前帧的时间戳，V0和A0分别为所述任一路视频流和所述混音流的起始时间戳，V1为所述任一路视频流上一帧的时间戳，SyncT为预设的音视频同步阈值与V2-V1之间的最大值，λ1和λ2分别为预设的第一步长和第二步长。