[发明专利]一种音频状态可视化播放和反馈方法、装置及终端

说明书

一种音频状态可视化播放和反馈方法，包括以下步骤：生成本地采集音频的重采样序列样本和本地播放音频的重采样序列样本；绘制本地采集音频曲线位图和本地播放音频曲线位图，并叠加到本地视频帧中进行显示；将所述本地采集音频的重采样序列样本和本地播放音频的重采样序列样本进行打包发送；将接收的远端反馈数据包进行解包拆分，获取远程终端的采集音频的重采样序列样本和远程终端的播放音频的重采样序列样本；绘制远端采集音频曲线位图和远端的播放音频曲线位图，并叠加到远端视频帧中进行显示。本发明还提供一种音频状态可视化播放和反馈装置，通过将本地和远程终端的音频状态采用可视化直观反馈给用户，帮助用户快速了解当前状态。

技术领域

本发明涉及多媒体会议系统技术领域，特别是涉及多媒体会议系统中各终端音频状态播放和反馈方法。

背景技术

现有的多媒体会议系统或多媒体通信系统，系统终端对于音频的处理，在发送侧包括：音频采集、音频编码、音频发送，通过网络传输到达接收侧，在接收侧包括：音频接收、音频解码、音频播放。参会人员通过语音交互是否正常判断当前各终端的音频处理是否正常。

由于系统终端对于音频的处理缺少直观反映音频各环节处理状态的手段，当音频交互不畅，如本方人员发言收不到对方回应，通常需要多次询问对方是否能听到自己说话，或者借助第三方软件交流，判断大概的问题，不能将本地和远端终端音频处理各关键环节的状态直观反馈给用户，效率很低。

发明内容

为了解决现有技术存在的不足，本发明的目的在于提供一种音频状态可视化播放和反馈方法、装置及终端，可以通过将本地和远程终端音频处理各关键环节的状态直观反馈给用户，帮助用户快速了解当前状态，缩小问题定位范围。

为实现上述目的，本发明提供的音频状态可视化播放和反馈方法，包括以下步骤：

生成本地采集音频的重采样序列样本和本地播放音频的重采样序列样本；

绘制本地采集音频曲线位图和本地播放音频曲线位图，并叠加到本地视频帧中进行显示；

将所述本地采集音频的重采样序列样本和本地播放音频的重采样序列样本进行打包发送；

将接收的远端反馈数据包进行解包拆分，获取远程终端的采集音频的重采样序列样本和远程终端的播放音频的重采样序列样本；

绘制远端采集音频曲线位图和远端的播放音频曲线位图，并叠加到远端视频帧中进行显示。

进一步地，所述生成本地采集音频的重采样序列样本和本地播放音频的重采样序列样本的步骤，进一步包括：

对本地音频采集样本进行二次采样，获取本地音频采集样本的重采样数据，生成本地采集音频的重采样序列样本；

对本地音频的播放样本进行二次采样，获取本地音频播放样本的重采样数据，生成本地播放音频的重采样序列样本。

进一步地，所述绘制本地采集音频曲线位图和本地播放音频曲线位图，并叠加到本地视频帧中进行显示的步骤，进一步包括：

根据本地采集音频的重采样序列样本，绘制本地采集音频曲线位图；

根据本地播放音频的重采样序列样本，绘制本地播放音频曲线位图；

将所述本地采集音频曲线位图和所述本地播放音频曲线位图叠加到本地视频帧中进行显示。

进一步地，包括，

通过绘制麦克风和扬声器图标分别指示对应的本地采集音频曲线位图和本地播放音频曲线位图，并叠加到本地视频帧中。

进一步地，所述绘制远端采集音频曲线位图和远端的播放音频曲线位图，并叠加到远端视频帧中进行显示的步骤，进一步包括：