[发明专利]一种音像同步显示方法及系统

说明书

本发明涉及一种音像同步显示方法及系统，其将文本文件转化成文字贴图，将音频文件的播放时间转化为时间贴图，并将其依附于材质贴图表面；当音频文件被播放时，本发明通过将当前音频的播放时间值匹配到时间贴图同步渲染其遮罩的文字贴图，使文字贴图显像。本发明能够在图像和音频播放时，在图像中相应的文字位置上层同步突显出播放的文字，便于体验者方便快捷的阅览展示对象，不会因为自主识别图像困难而影响体验感受，也大大增加展示对象的真实度。

技术领域

本发明涉及语言数据处理方法技术领域，具体涉及一种音像同步显示方法及系统。

背景技术

随着现代科技的发展，人们越来越重视感官感受，对虚拟对象的准确度、便捷度、仿真度以及互动性也有了越来越高的要求。单纯固定的图像演示或视频演示已经不能满足体验者的感官需求，现代体验中更需要文字、声音、图像结合的全方位展示。现有技术中的声像同步方法多是利用视频处理技术，将文字嵌入视频流中，根据音频中每个文字的播放时间段来逐步显示文字。例如，申请号为ZL200510130405.8、ZL200610027001.0和ZL201210078552.5的中国专利申请所公布的文字音频同步方法，均是应用于音频视频后期同声字幕制作，所用方法为使音频码对应时间数据来达到音频流和时间同步的效果，这种同步方法仅适用于音频或视频制作。但对于本身含有文字的展示对象而言，上述方法制作的虚拟对象无法清晰的演示出展示对象的内容细节，更无法达到将内容细节和声音图像同步逐字显示的效果，镶嵌在虚拟图像旁边的文字也无法代替图像真实有效的模仿展示对象。且通过上述方法制作的虚拟产品还是只停留在二维的平面制作上，不能体现出展示对象的立体感，感官体验较差。现有技术中的文字声音同步方法还存在很多不足。

发明内容

本发明的目的在于提供一种音像同步显示方法及系统，以解决的现有技术的问题：现有技术中无法实现将虚拟对象上包含文字内容和其声音、图像同步逐字显示的功能。

为了实现上述发明目的，本发明提供的技术方案如下：

一种音像同步显示方法，包括以下步骤：

步骤一，读取文本文件，将所述文本文件中每个文字生成文字贴图；

步骤二，将所述文字贴图嵌入材质贴图；

步骤三，依据所述文本文件生成音频文件，逐字截取每个文字播放时间pt；

步骤四，通过所述播放时间pt生成时间贴图；

步骤五，所述时间贴图遮罩所述文字贴图；

步骤六，播放所述音频文件时，调整所述时间贴图遮罩的所述文字贴图的渲染颜色值，使所述文字贴图显像在所述材质贴图上。

进一步地，所述时间贴图为渐变色块，所述色块的颜色由所述播放时间pt的长度决定。

进一步地，所述步骤三中，通过所述音频文件中每个文字读取的起始时间st和截止时间et，截取出每个文字的所述播放时间pt。

进一步地，通过音频文件的音波变化自动获取所述起始时间st和所述截止时间et或手动设定所述起始时间st和所述截止时间et。

进一步地，所述材质贴图嵌有所述文本文件中的文字。

进一步地，所述文字贴图嵌入所述材质贴图的位置对应所述材质贴图中的相同文字。

进一步地，所述音像同步显示方法还包括以下步骤：

步骤七，所述播放时间pt与所述文本文件中每个文字建立对应关系；

步骤八，根据所述对应关系获取输入的检索文字的播放时间，当其与所述时间贴图中包含所述播放时间pt相同时，渲染所述时间贴图遮罩的所述文字贴图的颜色值，使所述文字贴图显像在所述材质贴图上。