[发明专利]视频帧同步时嵌入音频的处理系统及处理方法

说明书

本发明提供了一种视频帧同步时嵌入音频的处理系统，包括：视音频数据分离模块将带有嵌入音频的视频信号分离成同步的视频数据和音频数据；视频帧同步模块对视频数据进行处理，输出帧同步的状态信号，同时输出帧同步后的视频数据；音频重采样模块对音频数据进行重采样，同时，基于状态信号，进行相应的减少音频样点或增加音频样点的操作，并将重采样后的音频数据输出；视音频数据嵌入模块将帧同步后的视频数据和重采样后的音频数据重新组合成带有嵌入音频的视频信号并输出。本发明还公开了一种视频帧同步时嵌入音频的处理方法。本发明不需要把音频进行数模转换，重采样后再模数转换的过程，简化了嵌入音频的处理设备，减少了开发时间和资金。

技术领域

本发明涉及音视频数据处理技术领域，更具体地，涉及一种视频帧同步时嵌入音频的处理系统及处理方法。

背景技术

数字视频的行逆程或者场逆程会放置嵌入音频数据包，视频从发送时钟域（clk_tx）进入参考时钟域（clk_ref），由于时钟不同，需要进行帧同步操作，视频帧同步的基本操作方法是，用clk_tx时钟将视频数据写入缓冲区buf，再用clk_ref时钟把视频数据从缓冲区buf读出，按照clk_ref时钟域重新形成视频流。由于发送时钟clk_tx和参考时钟clk_ref之间必然会存在偏差，为了视频画面不出现撕裂，跳帧等现象，必然要对视频数据进行整帧抛帧，或者整帧重复输出的操作。物体在快速运动时,当人眼所看到的影像消失后，人眼仍能继续保留其影像0.1-0.4秒左右的图像，这种现象被称为视觉暂留现象。视频刷新率主要有23.98HZ，24HZ，，25HZ，29.97HZ，30Hz，50HZ，59.94HZ，60HZ等，刷新率最低的23.98HZ的视频，它一帧视频的时间是0.0417秒，远低于人眼的视觉暂留时间0.1-0.4秒，所以，偶尔丢失一帧或者重复一帧视频，人眼一般不会察觉。

数字音频是我们保存声音信号，传输声音信号的一种方式，它的特点是信号不容易损失。而模拟信号是我们最后可以听到的东西。采样频率就是采用一段音频，作为样本，因为wav使用的是数码信号，它是用一堆数字来描述原来的模拟信号，所以它要对原来的模拟信号进行分析，我们知道所有的声音都有其波形，数码信号就是在原有的模拟信号波形上每隔一段时间进行一次取点，赋予每一个点以一个数值，这就是采样，然后把所有的点连起来就可以描述模拟信号了，很明显，在一定时间内取的点越多，描述出来的波形就越精确，这个尺度我们就称为“采样频率”。

经过采样得到的数字音频样点，封装起来放到视频的逆程中，随着视频数据进行传输，这就是音频的嵌入过程。音频的嵌入遵循标准SMPTE272M。

帧同步的操作中，视频可以整帧进行抛弃或者重复，但是该帧进行抛弃或者重复的视频中嵌入的音频数据却不能简单抛弃或者重复，否则会造成音频出现爆音，频率不对，或者其他不可忽视的问题，因此对嵌入的音频数据要进行专门的处理。现有的嵌入音频同步操作方法：如图1所示，先用视音频数据分离模块把嵌入音频从视频数据中解嵌出来，再把解嵌出来的数字音频数据进行数模转换，恢复为模拟音频信号，然后用参考时钟对该模拟信号进行重采样，对采样后的模拟信号进行模数转换，最后把采样得到的音频样点由视音频嵌入模块重新嵌入到已做完帧同步的视频信号中。这种方法使嵌入音频的处理设备复杂，增大了电路面积，增加了开发资金和开发时间，同时，也扩大了音频在视频帧同步处理过程中所受的影响。

发明内容

有鉴于此，本发明的主要目的在于提供一种视频帧同步时嵌入音频的处理系统及处理方法，能够解决现有技术中存在的处理设备复杂、音频所受影响大的问题。

为达到上述目的，本发明的技术方案是这样实现的：