[发明专利]音视频同步的方法、音视频同步系统、设备及存储介质

说明书

本申请提供了一种音视频同步的方法、音视频同步系统、设备及存储介质。所述方法应用于音视频同步系统；所述音视频同步系统包括协转服务器；所述协转服务器虚拟出包括视联网模块、音视频同步模块以及实时传输模块的视联网虚拟终端；通过在音视频同步模块，比较音频编码时间戳和系统时间戳，以及视频编码时间戳和系统时间戳，视联网模块再根据比较结果，控制将音频裸流数据包和视频裸流数据包发送给实时传输模块的时机，实现音频视频在视联网传输过程中的同步，以使互联网终端不再出现观看到的画面慢于听到声音的延迟现象。

技术领域

本申请涉及数据处理技术领域，特别是涉及一种音视频同步的方法、音视频同步系统、设备及存储介质。

背景技术

由于音频数据包小于视频数据包，所以在音频和视频从视联网终端往互联网终端传输过程中，音频数据包的传输速度大于视频数据包的传输速度，导致在视联网终端和互联网终端进行点对点可视电话呼叫，或者进行视频会议时，视联网终端采集的音频数据会比同一时刻采集的视频数据先传输到互联网终端，进而造成在互联网终端观看到的画面慢于听到声音的延时现象。

发明内容

鉴于上述问题，本申请实施例提供一种克服上述问题或者至少部分地解决上述问题的一种音视频同步的方法、音视频同步系统、设备及存储介质。

为解决上述问题，本申请实施例一方面公开了一种音视频同步的方法，所述方法应用于音视频同步系统；所述音视频同步系统包括协转服务器；所述协转服务器虚拟出包括视联网模块、音视频同步模块以及实时传输模块的视联网虚拟终；所述方法包括：

所述视联网模块获得音频裸流数据包和所述音频裸流数据包对应的音频编码时间戳，以及视频裸流数据包和所述视频裸流数据包对应的视频编码时间戳；

所述视联网模块将所述音频编码时间戳和所述视频编码时间戳传递给所述音视频同步模块；

所述音视频同步模块在系统时间戳等于所述音频编码时间戳时，将所述音频编码时间戳返回给所述视联网模块；

所述视联网模块将返回的所述音频编码时间戳对应的音频裸流数据包传递给所述实时传输模块；

所述音视频同步模块将与所述系统时间戳最接近的所述视频编码时间戳返回给所述视联网模块；

所述视联网模块将返回的所述视频编码时间戳对应的视频裸流数据包传递给所述实时传输模块。

可选地，所述音视频同步系统还包括视联网终端和视联网服务器；所述方法还包括：

所述视联网终端采集所述音频裸流数据包，并对所述音频裸流数据包生成对应的所述音频编码时间戳；

所述视联网终端根据所述音频编码时间戳，对所述音频裸流数据包进行编码，得到音频编码；

所述视联网终端采集所述视频裸流数据包，并对所述视频裸流数据包生成对应的所述视频编码时间戳；

所述视联网终端根据所述视频编码时间戳，对所述视频裸流数据包进行编码，得到视频编码；

所述视联网终端分别封装所述音频编码和所述视频编码，得到视联网音频协议包和视联网视频协议包，并发送给所述视联网服务器；

所述视联网服务器将接收的所述视联网音频协议包和所述视联网视频协议包发送给所述协转服务器。

可选地，所述视联网模块获得音频裸流数据包和所述音频裸流数据包对应的音频编码时间戳，以及视频裸流数据包和所述视频裸流数据包对应的视频编码时间戳；包括：

所述视联网模块接收所述视联网音频协议包和所述视联网视频协议包；

所述视联网模块对所述视联网音频协议包进行提取，得到所述音频裸流数据包和所述音频裸流数据包对应的所述音频编码时间戳；