[发明专利]基于智能服务平台的智能制造展示系统及方法

权利要求书

1.一种基于智能服务平台的智能制造展示系统，其特征在于，所述系统包括智能制造采集终端、智能服务平台和智能制造展示终端，所述智能采集终端包括摄像头和第一无线通信设备，所述摄像头用于采集智能制造视频，所述第一无线通信设备用于与所述智能服务平台进行通信，将所述摄像头采集的智能制造视频发送至所述智能服务平台，所述智能制造展示终端包括显示屏、音响和第二无线通信设备，所述第二无线通信设备与所述智能服务平台进行通信，用于从所述智能服务平台接收所述智能服务平台发送的展示视频，所述显示屏和所述音响用于播放所述展示视频，所述智能服务平台包括：

无线通信模块，用于与所述第一无线通信设备进行通信，从所述智能制造采集终端获取智能制造视频，以及与所述第二无线通信设备进行通信，将所述智能制造视频发送至所述智能制造展示终端；

设备识别模块，用于在所述智能制造视频中每一帧画面识别特定的智能制造设备，并计算该帧画面中智能制造设备的尺寸与预设设备标准尺寸之间的比例，于比例大于第一预设阈值时，将该帧画面记录为设备符合画面；

人脸识别模块，用于在所述智能制造视频中每一帧画面识别特定的人脸，并计算该帧画面中人脸的尺寸与预设人脸标准尺寸之间的比例，于比例大于第二预设阈值时，将该帧画面记录为人脸符合画面；

噪音识别模块，用于在所述智能制造视频中识别声音，将音量大于第三预设阈值或频率大于第四预设阈值的声音定义为噪音，将噪音所对应的画面记录为噪音画面；

语音识别模块，用于在所述智能制造视频中识别人的语音，对人的语音进行语音识别和语句分割，得到多段语音，并记录每段语音所对应的画面的帧数，将智能制造视频按照多段语音的分割方式分割的到多个视频段落；

画面评分模块，用于将设备符合画面的设备值设置为1，将非设备符合画面的设备值设置为0，将人脸符合画面的人脸值设置为1，将非人脸符合画面的人脸值设置为0，将噪音画面的噪音值设置为0，将非噪音画面的噪音值设置为1，分别根据预设的设备值的权值、人脸值的权值和噪音值的权值将各帧画面的设备值、人脸值和噪音值加权求和，作为该帧画面的评分，并将一个视频段落中所有画面的评分相加作为该视频段落的评分；

视频合成模块，用于根据预设的展示视频的时间长度，从所述智能制造视频中依次选择评分最高的视频段落，将选择的视频段落合成所述展示视频；

所述设备识别模块还用于从所述智能制造视频的每一帧画面中识别制造设备以及识别制造设备的类型，所述设备识别模块统计每一种智能制造设备出现的画面的帧数，将出现的画面的帧数最多的智能制造设备作为特定的智能制造设备，将出现该特定的智能制造设备的画面设定为设备符合画面，将出现其他类型智能制造设备或未出现智能制造设备的画面设定为非设备符合画面；

所述语音识别模块还用于从所述设备识别模块中获取智能制造设备的类型，根据设备类型与关键词的映射关系，查找到所述智能制造设备的类型所对应的关键词；

所述语音识别模块还用于检测每个视频段落中语音中是否存在所述智能制造设备的类型所对应的关键词，如果存在，则将该视频段落的语义值定义为第一预设语义值，如果不存在，则将该视频段落的语义值定位为第二预设语义值，所述第一预设语义值和所述第二预设语义值均为介于0和1之间的数值。

2.根据权利要求1所述的基于智能服务平台的智能制造展示系统，其特征在于，所述智能服务平台还包括权值选择模块，所述权值选择模块用于获取所述设备识别模块识别到的特定的智能制造设备的类型，根据智能制造设备的类型与权值的映射关系获取该智能制造设备所对应的设备值的权值、人脸值的权值和噪音值的权值。

3.根据权利要求1所述的基于智能服务平台的智能制造展示系统，其特征在于，智能服务平台的设备识别模块采用训练好的设备识别模型对所述智能制造视频中的每桢画面进行设备识别；

所述设备识别模型的训练集包括各种智能制造设备的六个表面的多张照片以及各种智能制造设备在不同使用状态时的多张照片，且所述训练集中各个照片上标注有所对应的智能制造设备的类型。