[发明专利]适合听障人士参与的多人会议方法、系统及装置

权利要求书

1.一种适合听障人士参与的多人会议方法(10)，其特征在于，采用的系统包括：

用于确定参会或发言者位置的位置指定模块；

用于获取指定位置人员声音或图像的信息采集装置，包括语音采集模块以及图像采集模块；

与位置指定模块和信息采集装置连接的微处理器(220)，以及输出微处理器(220)输出图文信号的图文输出装置和输出微处理器(220)输出的语音信号的语音输出装置；

所述方法包括以下步骤：

S1)利用位置指定模块，建立与会人员模型数据并传送到所述微处理器(220)；

S2)如果信息采集装置采集到声音，所述微处理器(220)将声音信号转换成文字或手语图像信号通过图文输出装置输出；

S3)如果信息采集装置采集到手语图像，所述微处理器(220)将手语图像信号转换成语音信号通过语音输出装置输出；

S4)微处理器(220)记录发言者的ID和发言内容。

2.根据权利要求1所述方法，其特征在于，所述与会人员模型数据包括人员ID、位置信息、发言类型以及权限信息，其中位置信息用于所述信息采集装置精准采集其手语或语音信号，所述ID用于微处理器(220)记录具体位置对应发言者ID，所述发言类型包括语音发言和手语发言，用于微处理器(220)识别和自动启用对应的转换过程，所述权限信息用于微处理器(220)决定哪个位置优先发言。

3.根据权利要求2所述方法，其特征在于，所述步骤S2包括：识别出某一位置发言者是语音发言类型，启动语音采集模块对准发言者位置，由语音采集模块定向采集对应位置的语音信号给微处理器(220)，将语音信号记录并转换成手语图像输出以及转换成文字信号加以保存；所述步骤S3包括：识别出某一位置发言者是手语发言类型，启动图像采集模块对准发言者位置，由图像采集模块定向采集对应位置的手语图像信号给微处理器(220)，将手语信号记录并转换成语音输出以及转换成文字信号加以保存。

4.根据权利要求3所述方法，其特征在于，所述步骤S2包括：

步骤S21：由位置模拟模块(240)建立场景声源模型，预设不同方位的声源的方向参数；

步骤S22：根据所述场景声源模型选择目标声源的方向参数，并由语音采集模块(250)定向采集该方向的声音信息；

步骤S23：采用语音预处理模块(270)剔除所述声音信息中的噪声部分，噪声的判断标准为低于或高于预定频率范围以及低于预定振幅的声音；

步骤S24：语音翻译模块(280)将除噪后的声音分帧，识别为状态点并进行组合以形成手语图像或文字进行输出和显示；

所述步骤S3包括：

步骤S31：在手语识别模块(292)内预设不同手语动作所对应的语义编码内容，形成编码库；

步骤S32：图像采集模块(291)获取听力障碍与会人员做出的手语动作影像；

步骤S33：手语识别模块(292)按照时间发生的先后顺序将手语动作影像等分为若干段，将每一段影像分别与所述编码库内的编码内容进行比对判断，获得若干词条，并组合成句，形成翻译内容；

步骤S34：将所述翻译内容以声音信号形式进行播放。