[发明专利]一种基于语音的会议协助方法及系统、存储介质及终端

权利要求书

1.一种基于语音的会议协助方法，其特征在于，包括以下步骤：

接收用户发送来的第一语音信息；

将所述第一语音信息转换为第一文本信息；

基于所述第一文本信息向会议交互服务终端发出请求信息，并接收所述会议交互服务终端发送来的反馈信息；其中对基于知识图谱的QA和基于信息检索的QA进行融合，基于语义的匹配算法，在检索、回答模板和知识库进行语义识别和分析，并基于分析结果生成所述请求信息；在对所述第一文本信息进行语义理解建模时，从意图理解分类、问题类型分类、答案类型分类和多轮判定分类去考虑；

将所述反馈信息转换为第二文本信息；

将所述第二文本信息转换为第二语音信息，并输出所述第二语音信息；

所述请求信息包括会议信息查询请求、会议场景模式切换请求、会议设备控制请求、会务服务请求、会议任务督办请求和会议增值服务请求中的一种或多种组合；

还包括基于所述第一语音信息进行用户识别。

2.根据权利要求1所述的基于语音的会议协助方法，其特征在于，所述会议信息查询请求包括时间查询请求、地点查询请求、议题查询请求和参与者查询请求中的一种或多种组合；所述会议场景模式切换请求包括开始会议请求、结束会议请求、视频会议请求和投影模式请求中的一种或多种组合；所述会议设备控制请求包括设备开启请求和设备关闭请求。

3.根据权利要求1所述的基于语音的会议协助方法，其特征在于，基于PaddlePaddle框架利用循环神经网络生成第二文本信息；基于隐马尔可夫模型的语音合成模型生成所述第二语音信息。

4.一种基于语音的会议协助系统，其特征在于，包括接收模块、第一转换模块、管理模块、第二转换模块和输出模块；

所述接收模块用于接收用户发送来的第一语音信息；

所述第一转换模块用于将所述第一语音信息转换为第一文本信息；

所述管理模块用于基于所述第一文本信息向会议交互服务终端发出请求信息，并接收所述会议交互服务终端发送来的反馈信息；其中对基于知识图谱的QA和基于信息检索的QA进行融合，基于语义的匹配算法，在检索、回答模板和知识库进行语义识别和分析，并基于分析结果生成所述请求信息；在对所述第一文本信息进行语义理解建模时，从意图理解分类、问题类型分类、答案类型分类和多轮判定分类去考虑；

所述第二转换模块用于将所述反馈信息转换为第二文本信息；

所述输出模块用于将所述第二文本信息转换为第二语音信息，并输出所述第二语音信息；

所述请求信息包括会议信息查询请求、会议场景模式切换请求、会议设备控制请求、会务服务请求、会议任务督办请求和会议增值服务请求中的一种或多种组合；

还包括基于所述第一语音信息进行用户识别。

5.一种存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现权利要求1至3中任一项所述的基于语音的会议协助方法。

6.一种会议协助终端，其特征在于，包括：处理器及存储器；

所述存储器用于存储计算机程序；

所述处理器用于执行所述存储器存储的计算机程序，以使所述会议协助终端执行权利要求1至3中任一项所述的基于语音的会议协助方法。

7.一种基于语音的会议协助系统，其特征在于，包括权利要求6所述的会议协助终端和会议交互服务终端；

所述会议交互服务终端用于接收所述会议协助终端发送来的请求信息，生成反馈信息并发送至所述会议协助终端。

8.根据权利要求7所述的基于语音的会议协助系统，其特征在于，所述会议交互服务终端包括中控类设备、分布式控制器和交互接口中的一种或多种组合。