[发明专利]一种可实时语音交互的数字化多功能智慧展厅云控制平台

权利要求书

1.一种可实时语音交互的数字化多功能智慧展厅云控制平台，其特征在于：包括信息录入模块、展台数量统计模块、展台空间检测模块、区域人数统计模块、指令采集模块、指令识别模块、声音清晰度检测模块、数据处理与分析模块、确认终端、执行终端和数据库；

数据处理与分析模块分别与展台空间检测模块、区域人数统计模块、指令采集模块、指令识别模块、声音清晰度检测模块、确认终端、执行终端和数据库相连接，指令采集模块与指令识别模块连接，展台数量统计模块分别与信息录入模块和展台空间检测模块连接；

所述信息录入模块用于将参观该多功能智慧展厅的参观人员进行基本信息导入，其中该多功能智慧展厅参观人员的基本信息包括参观人员姓名、参观人员音色特征和参观人员人脸图像；

所述展台数量统计模块用于对该多功能展厅内对应的展台数量进行统计，进而获取该多功能展厅内对应的展台数量，进而将统计的该多功能展厅内对应的展台按照预设顺序进行编号，依次标记为1,2，...i，...n；

所述展台空间检测模块包括对各个展台所在区域对应的空间大小进行统计，进而通过三维激光扫描仪对各展台所在区域进行扫描，进而获取该多功能展厅各展台所在区域对应的空间体积，进而根据各展台所在区域对应的空间体积，进而构建各展台空间体积集合L(L1，L2，...Li,...Ln)，Li表示第i个展台所在区域对应的空间体积，将构建的各展台空间体积集合发送至数据处理与分析模块；

所述区域人数统计模块包括若干摄像头，其分别安装在各展台所在区域内，其分别用于对各展台所在区域的参观人员进行数量统计，进而通过各展台所在区域的摄像头对各展台所在区域的参观人员进行图像采集，进而获取各展台所在区域对应的参观人员图像，根据采集的各展台所在区域对应的各参观人员图像，进而对各展台所在区域对应的各参观人员图像进行特征提取，将提取的各参观人员图像特征进行对比筛选，进而统计各展台所在区域对应的参观人员数量，将统计的各展台所在区域的参观人员按照预设顺序进行编号，依次标记为1,2，...j...m，进而将统计的各展台所在区域对应的参观人员数量发送至数据处理与分析模块；

所述指令采集模块包括若干指令采集单元，其分别安装在各展台所在区域内，其用于对各展台所在区域对应的各参观人员进行指令信号采集，当某时刻某展台所在区域某位参观人员发出指令时，对该区域参观人员对应的指令信息进行采集，进而获取该采集时间点各展台所在区域各参观人员对应的指令信息，根据该采集时间点各展台所在区域各参观人员对应的指令信息，进而将该采集的时间各展台所在区域各参观人员对应的指令信息进行音色特征提取，进而获取该采集时间点各展台所在区域各参观人员对应的音色特征，同时通过深度学习对该采集时间点各展台所在区域各参观人员对应的指令信息进行声源位置获取，进而获取该采集时间点各展台所在区域各声源对应的位置，将该采集时间点各展台所在区域各参观人员对应的指令信息发送至指令识别模块，将该采集时间点各展台所在区域各参观人员对应的音色特征和该采集时间点各展台所在区域各声源对应的位置发送至数据处理与分析模块；

所述指令识别模块用于接收指令采集模块发送的该采集时间点各展台所在区域各参观人员对应的指令信息，进而对该采集时间点各展台所在区域各参观人员对应的指令信息进行识别，根据该采集时间点各展台所在区域各参观人员对应的指令信息，进而将该采集时间点各展台所在区域各参观人员对应的指令信息进行降噪和滤波处理，进而获取降噪和滤波后的各展台所在区域各参观人员对应的指令信息，进而通过语音识别技术，将各展台所在区域各参观人员对应的指令信息转化为平台可识别的指令信号，进而获取各展台所在区域各参观人员对应的指令内容，同时通过频谱分析法对各展台所在区域各参观人员对应的指令信息进行频谱分析，进而获取各展台所在区域各参观人员指令对应的分贝，将指令分贝记为b，进而将各展台所在区域各参观人员指令对应的分贝将发送至数据处理与分析模块；

所述声音清晰度检测模块通过声音清晰度检测仪各展台所在区域各参观人员发出的指令进行清晰度检测，当指令采集单元开始采集指令信息时，启动声音清晰度检测仪对各展台所在区域各参观人员发出的指令进行清晰度检测，进而获取该时间点各展台所在区域各参观人员发出的指令对应的清晰度，进而构建各展台所在区域参观人员指令清晰度集合D_r(D_r1,D_r2,...D_ri,...D_rn)，D_ri表示第i个展台所在区域第r个参观人员对应的指令清晰度，r表示参观人员编号，r＝1,2，...j...m,进而将各展台所在区域参观人员指令清晰度集合发送至数据处理与分析模块；

所述数据处理与分析模块用于接收指令采集模块发送的该采集时间点各展台所在区域各参观人员对应的音色特征和该采集时间点各展台所在区域各声源对应的位置，进而根据参观该多功能智慧展厅各参观人员对应的基本信息，获取该多功能智慧展厅的各参观人员对应的音色特征，将各展台所在区域各参观人员对应的音色特征与参加该多功能智慧展厅各参观人员对应的音色特征进行对比筛选，进而从数据库调取各展台所在区域各音色特征对应的指令筛选影响系数，并记为将进而根据该采集时间点各展台所在区域各声源对应的位置和各声源对应的音色特征进而获取各展台所在区域各参观人员对应的位置，进而从数据中调取各展台所在区域各参观人员位置对应的指令筛选影响系数，并记为α；

所述数据处理与分析模块用于接收展台空间检测模块发送的各展台空间体积集合和区域人数统计模块发送的各展台所在区域对应的参观人员数量，根据各展台空间体积集合进而获取各展台所在区域对应的空间体积大小，进而从数据库提取各展台所在区域空间体积对应的标准参观人员数量，将各展台所在区域对应的参观人员数量与各展台所在区域空间体积对应的标准参观人员数量进行对比，进而统计各展台所在区域参观人员密集度影响系数；

所述数据处理与分析模块用于接收指令识别模块发送的各展台所在区各展台所在区域各参观人员指令对应的分贝，将各展台所在区域各参观人员指令对应的分贝与各展台所在区域对应的标准指令分贝进行对比，进而获取各展台所在区域各参观人员指令对应的分贝与各展台所在区各展台所在区域对应的标准指令分贝的差值，根据该差值进而统计各展台所在区域对应的分贝影响系数；

所述数据处理与分析模块用于接收声音清晰度检测模块发送的各展台所在区域参观人员指令清晰度集合，根据该集合，进而获取各展台所在区域各参观人员指令对对应的清晰度，将各展台所在区域各参观人员指令对应的清晰度与各展台所在区域各参观人员指令对应的标准清晰度进行对比，进而统计各展台所在区域对应的清晰度影响系数；

数据处理与分析模块根据统计的各展台所在区域各音色特征对应的指令筛选影响系数、各展台所在区域各参观人员位置对应的指令筛选影响系数、各展台所在区域对应的参观人员密集度影响系数、各展台所在区域对应的分贝影响系数和各展台所在区域对应的清晰度影响系数，进而统计各展台所在区域对应的指令筛选精准度影响系数，进而根据各展台所在区域各参观人员对应的指令内容，将而将各展台所在区域各参观人员对应的指令内容进行对比筛选，若指令内容一致，进而将各展台所在区域各参观人员对应的指令内容发送至执行终端，若指令内容不一致，进而根据各展台所在区域指令对应的筛选精准度影响系数，将各展台所在区域各指令对应的筛选精准度影响系数按照从大到小的顺序进行排序，进而获取排名第一位的指令，将该指令记为执行指令，进而将各展台所在区域对应的执行指令发送至确认终端；

所述确认终端用于接收数据处理与分析模块发送的各展台所在区域对应的执行指令，进而调取各展台对应的确认提示单元对各展台对应的执行指令进行提示和确认，进而将已确认的各展台对应的执行指令进而发送至执行终端；

所述执行终端用于接收数据处理与分析模块发送的各展台所在区域各参观人员对应的指令内容和确认终端发送的已确认的各展台对应的执行指令，当执行终端接收到各展台所在区域各参观人员对应的指令内容或已确认的各展台对应的执行指令时，进而调取各展台对应的执行终端执行其对应的指令；

所述数据库用于存储各展台所在区域各音色特征对应的指令筛选影响系数、各展台所在区域各参观人员位置对应的指令筛选影响系数、各展台所在区域空间体积对应的标准参观人员数量、各展台所在区各展台所在区域对应的标准指令分贝、各展台所在区域各参观人员指令对应的标准清晰度。