[发明专利]音视频同步的方法、音视频同步系统、设备及存储介质

权利要求书

1.一种音视频同步的方法，其特征在于，所述方法应用于音视频同步系统；所述音视频同步系统包括协转服务器；所述协转服务器运行程序虚拟出包括视联网模块、音视频同步模块以及实时传输模块的视联网虚拟终端；其中，所述音视频同步模块为所述协转服务器通过调用用于实现音视频同步的动态库得到的；所述协转服务器虚拟出的视联网虚拟终端用于接收音频和视频封装成的视联网协议包，并将音频和视频封装成的视联网协议包转换为互联网协议包；所述方法包括：

所述视联网模块获得音频裸流数据包和所述音频裸流数据包对应的音频编码时间戳，以及视频裸流数据包和所述视频裸流数据包对应的视频编码时间戳；其中，所述音频裸流数据包和所述音频裸流数据包是分别从视联网音频协议包和视联网视频协议包中提取得到的，所述视联网音频协议包和所述视联网视频协议包是由视联网终端对采集的音频和视频进行封装得到的；

所述视联网模块将所述音频编码时间戳和所述视频编码时间戳传递给所述音视频同步模块；

所述音视频同步模块在系统时间戳等于所述音频编码时间戳时，将所述音频编码时间戳返回给所述视联网模块；

所述视联网模块将返回的所述音频编码时间戳对应的音频裸流数据包传递给所述实时传输模块；

所述音视频同步模块将与所述系统时间戳最接近的所述视频编码时间戳返回给所述视联网模块；

所述视联网模块将返回的所述视频编码时间戳对应的视频裸流数据包传递给所述实时传输模块；

所述实时传输模块将获取的所述音频裸流数据包和所述视频裸流数据包封装成互联网协议包后传输给互联网终端。

2.根据权利要求1所述的方法，其特征在于，所述音视频同步系统还包括视联网终端和视联网服务器；所述方法还包括：

所述视联网终端采集所述音频裸流数据包，并对所述音频裸流数据包生成对应的所述音频编码时间戳；

所述视联网终端根据所述音频编码时间戳，对所述音频裸流数据包进行编码，得到音频编码；

所述视联网终端采集所述视频裸流数据包，并对所述视频裸流数据包生成对应的所述视频编码时间戳；

所述视联网终端根据所述视频编码时间戳，对所述视频裸流数据包进行编码，得到视频编码；

所述视联网终端分别封装所述音频编码和所述视频编码，得到视联网音频协议包和视联网视频协议包，并发送给所述视联网服务器；

所述视联网服务器将接收的所述视联网音频协议包和所述视联网视频协议包发送给所述协转服务器。

3.根据权利要求1所述的方法，其特征在于，所述视联网模块获得音频裸流数据包和所述音频裸流数据包对应的音频编码时间戳，以及视频裸流数据包和所述视频裸流数据包对应的视频编码时间戳；包括：

所述视联网模块接收所述视联网音频协议包和所述视联网视频协议包；

所述视联网模块对所述视联网音频协议包进行提取，得到所述音频裸流数据包和所述音频裸流数据包对应的所述音频编码时间戳；

所述视联网模块对所述视联网视频协议包进行提取，得到所述视频裸流数据包和所述视频裸流数据包对应的所述视频编码时间戳。

4.根据权利要求1所述的方法，其特征在于，所述音视频同步系统还包括互联网终端，所述方法还包括：

所述实时传输模块接收所述音频裸流数据包，根据所述系统时间戳的当前值，重置所述音频编码时间戳；

所述实时传输模块接收所述视频裸流数据包，根据所述系统时间戳的当前值，重置所述视频编码时间戳；

所述实时传输模块根据重置后的音频编码时间戳和重置后的视频时间戳，分别对所述音频裸流数据包和所述视频裸流数据包进行编码，得到音频发送编码和视频发送编码；

所述实时传输模块分别封装所述音频发送编码和所述视频发送编码，得到所述互联网音频协议包和所述互联网视频协议包，并将所述互联网音频协议包和所述互联网视频协议包发送给所述互联网终端。