[发明专利]军用战术手语到汉语语音转换方法

说明书

本发明公开军用战术手语到汉语语音转换方法，包含有以下步骤，通过Kinect获取红外采集的军用战术手语深度图像；通过对军用战术手语深度图像提取骨骼点并进行聚类，获得军用战术手语的骨骼位置向量；军用战术手语的骨骼位置向量通过预先训练好的军用战术手语字典模型获得军用战术手语对应文本的上下文相关标注；军用战术手语对应文本的上下文相关标注通过预先训练好的普通话深度神经网络声学模型可以获得军用战术手语对应的声学参数；以及，军用战术手语对应的声学参数经过声码器合成出军用战术手语对应的普通话语音波形。本发明的有益效果在于：解决军用领域中对抗敌方使用军用战术手语进行无声作战、秘密作战的问题。

技术领域

本发明涉及人机交互，特别是军用战术手语到汉语语音转换方法。

背景技术

进入21世纪，随着高新技术的迅猛发展和广泛应用，推动了武器装备的发展和作战方式的演变，促进了军事理论的创新和编制体制的改革，由此引发新的军事革命—信息化战争。信息化战争最终将取代机械化战争，成为未来战争的基本形态。信息化战争并不排斥物质力量的较量，但主要是知识的较量，是创新能力和创新速度的竞赛。知识将成为战争毁灭力的主要来源，“计算机中一盎司硅产生的效应也许比一吨铀还大”。

火力、机动、信息是构成现代军队作战能力的重要内容，而信息能力已成为衡量作战能力高低的首要标志。信息能力，表现在信息获取、处理、传输、利用和对抗等方面，通过信息优势的争夺和控制加以体现。信息优势，实质就是在了解敌方的同时阻止敌方了解己方情况，是一种动态对抗过程。它已成为争夺制空权、制海权、陆地控制权的前提，在战争中谁拥有完备的信息，谁就将掌控整个战争的进程和结局。

军事行动中，各国士兵经常使用的“战术手语”就具备很强的信息优势。战术手语，是指在进行作战行动中利用手指、手掌和手臂所做出的动作、姿势来传达一些特定内容的通讯方式。通过这种简单的通信联络方法，队友中每个人都能准确地知道另一方的行动意图，从而减少使用无线通信装置被敌方窃听的机会，这样能有效地减小敌方对自己造成的威胁，更好的支援自己的队友。

战术手语通讯无需依靠任何设备和电源，发讯者在传达信息时，不会产生任何声响，更不会像无线电通讯容易被窃听或干扰，敌人只有在近距离和视线范围内，才有机会发现队友的手语，并且即使觉察了手语通讯的情况，也不可能进行干扰。手语的发出和接收都是同时进行，也没有延误的问题，具备很强的信息优势。当然这种信息优势也会被敌方所使用，当敌方使用战术手语时我方如何进行对抗。本发明的目的就是为了解决这个问题。将本发明“军用战术手语到汉语语音转换方法及装置”应用在军用武器、无人机和城市监控系统等上面，可以有效获取敌方在无声作战、秘密作战时使用的战术手语信息，并及时反馈给我方人员，能够做到实时监控敌方动向意图、提前发现有害敌情消灭敌人和对重要目标进行保护。

目前民用手语到语音转换产品存在以下缺陷：1.戴手套、2.没有使用红外，当光线不足时不可以用，不能满足军用场景的要求。

发明内容

本发明目的是克服现有技术中的技术问题，提供一种新型的军用战术手语到汉语语音转换方法。

为了实现这一目的，本发明的技术方案如下：军用战术手语到汉语语音转换方法，包含有以下步骤，

步骤S1，通过Kinect获取红外采集的军用战术手语深度图像；

步骤S2，通过对军用战术手语深度图像提取骨骼点并进行聚类，获得军用战术手语的骨骼位置向量；

步骤S3，军用战术手语的骨骼位置向量通过预先训练好的军用战术手语字典模型获得军用战术手语对应文本的上下文相关标注；

步骤S4，军用战术手语对应文本的上下文相关标注通过预先训练好的普通话深度神经网络（DNN）声学模型可以获得军用战术手语对应的声学参数；以及，

步骤S5，军用战术手语对应的声学参数经过声码器合成出军用战术手语对应的普通话语音波形。