[发明专利]音视频监控方法、装置、设备、存储介质以及系统

权利要求书

1.一种音视频监控方法，应用于媒体接收设备，所述媒体接收设备为客户端，其特征在于，所述方法包括：

从媒体采集设备获取多路媒体信号中每路媒体信号的描述信息，所述描述信息包括编号、有效载荷类型PT和同步信源SSRC，所述多路媒体信号包括单路视频信号和多路音频信号，所述多路音频信号采用不同的拾音器来采集；

基于所述多路媒体信号的编号，从所述媒体采集设备获取所述多路音频信号中每路音频信号对应的传输参数，所述传输参数用于指示对应音频信号的传输通道或者传输端口；

从所述媒体采集设备获取所述多路媒体信号的数据包，并接收所述媒体采集设备发送的实时传输控制协议RTCP报文，所述RTCP报文中携带网络时间协议NTP时间戳、实时传输协议RTP时间戳以及SSRC，每个数据包中携带所属媒体信号的SSRC；

基于所述多路媒体信号的PT，从获取到的数据包中确定视频数据包和音频数据包，以及基于所述多路音频信号中每路音频信号对应的传输参数，从所述音频数据包中确定所述多路音频信号中每路音频信号的数据包；

所述方法还包括：

从所述RTCP报文中获取SSRC，将所述多路媒体信号的数据包中携带的SSRC与所述RTCP报文中携带的SSRC进行匹配，以确定与所述RTCP报文中携带的SSRC相同的数据包；基于所述RTCP报文中的NTP时间戳、RTP时间戳，以及与所述RTCP报文中携带的SSRC相同的数据包中的RTP时间戳进行音视频同步；

当所述媒体接收设备与所述媒体采集设备通过传输控制协议TCP通信，所述传输参数包括通道标识，所述音频数据包携带所属的音频信号对应的通道标识时，所述基于所述多路音频信号中每路音频信号对应的传输参数，从所述音频数据包中确定所述多路音频信号中每路音频信号对应的数据包，包括：

在基于所述多路音频信号对应的传输参数确定所述多路音频信号对应的通道标识不同的情况下，按照所述音频数据包中携带的通道标识，确定所述多路音频信号中每路音频信号的数据包；

在基于所述多路音频信号对应的传输参数确定所述多路音频信号中至少两路音频信号对应的通道标识相同的情况下，基于所述多路音频信号中每路音频信号对应的PT和SSRC，从所述音频数据包中确定所述多路音频信号中每路音频信号对应的数据包。

2.如权利要求1所述的方法，其特征在于，当所述媒体接收设备与所述媒体采集设备通过用户数据报协议UDP通信，所述传输参数包括端口号，所述音频数据包携带所属的音频信号对应的端口号时，所述基于所述多路音频信号中每路音频信号对应的传输参数，从所述音频数据包中确定所述多路音频信号中每路音频信号对应的数据包，包括：

在基于所述多路音频信号对应的传输参数确定所述多路音频信号对应的端口号不同的情况下，按照所述音频数据包中携带的端口号，确定所述多路音频信号中每路音频信号对应的数据包。

3.如权利要求2所述的方法，其特征在于，所述方法还包括：

在基于所述多路音频信号对应的传输参数确定所述多路音频信号中至少两路音频信号对应的端口号相同的情况下，基于所述多路音频信号中每路音频信号对应的PT和SSRC，从所述音频数据包中确定所述多路音频信号中每路音频信号对应的数据包。

4.如权利要求1-3任一所述的方法，其特征在于，所述方法还包括：

播放所述视频信号以及所述多路音频信号；

显示多个拾音器的描述信息，所述多个拾音器是指用于采集所述多路音频信号的拾音器；

基于所述多个拾音器的描述信息接收音频信号切换指令，所述音频信号切换指令携带目标音频信号的编号，所述目标音频信号为所述多路音频信号中的一路；

将当前播放的音频信号切换至所述目标音频信号。