[发明专利]机器人作业数据分析服务器和机器人作业数据分析方法

说明书

本发明公开了一种机器人作业数据分析服务器，包括：数据采集模块，数据存储模块，数据分析模块；其中，数据采集模块用于利用电网机器人采集机器人作业数据；数据存储模块用于根据所述机器人作业数据的类别分布式存储所述机器人作业数据；数据分析模块用于根据用户选择的需要训练的特征及在预先建立的算法库中选择的算法模型，利用完成训练后的算法模型对所述机器人作业数据进行特征分析，得到分析结果。本发明提供了从采集数据、分布式存储数据和分析检测数据的完整的服务器体系架构，为实现对电力设备识别以及对电力设备安全隐患和异常的检测提供了高效便捷的解决方案。本发明还提供了一种机器人作业数据分析的方法，具有上述有益效果。

技术领域

本发明涉及大数据分析技术领域，特别是涉及一种机器人作业数据分析服务器。

背景技术

机器学习以及深度学习的应用主要是在人脸识别以及一些常规物体的检测方面，在这些常规物体的检测和识别方面也有很多比较成熟的数据集可以用来做训练和测试，比如专门用来做人脸识别的数据集LFW、CASIA-WebFace等，再比如专门用来做常规物体检测的数据集Pascal VOC。

国内外研究机构都十分重视机器学习、深度学习算法以及应用研究。但由于深度学习非常依赖巨量的数据集进行模型的训练，少量数据难以获得好的训练模型。另外因为深度学习算法的编程语言不同，应用场景不同，导致现有的一些算法库使用困难，不利于相关学者或者感兴趣人群的使用。

但现有技术中没有专门用来做电网设备的识别和检测的数据集，也没有对电网设备数据集进行搜集、存储和检测的大数据平台。

综上所述可以看出，如何提供一种可以对电网设备数据集进行搜集、存储和检测的服务器是目前有待解决的问题。

发明内容

本发明的目的是提供一种机器人作业数据分析服务器，以解决现有技术中没有用来对电网设备数据集进行搜集、存储和检测的大数据平台的问题。本发明还提供了一种机器人作业数据分析的方法，具有上述有益效果。

为解决上述技术问题，本发明提供一种机器人作业数据分析服务器，包括：数据采集模块，数据存储模块，数据分析模块；其中，所述数据采集模块用于利用电网机器人采集机器人作业数据；所述数据存储模块用于根据所述机器人作业数据的类别分布式存储所述机器人作业数据；数据分析模块，用于根据用户选择的需要训练的特征及在预先建立的算法库中选择的算法模型，利用完成训练后的算法模型对所述机器人作业数据进行特征分析，得到分析结果。

优选地，所述机器人作业数据包括：结构化数据、文本数据、高清彩图、红外热图、点云和音频数据。

优选地，所述数据存储模块包括数据清洗单元和数据存储单元；

其中，所述数据清洗单元用于对所述数据采集模块采集的机器人作业数据进行清洗，以便消除异常、冗余数据；并对所述机器人作业数据进行格式和维度转换，从而统一所述机器人作业数据的格式和维度；

所述数据存储单元用于利用MongDB分布式存储系统对完成清洗和转换的机器人作业数据中的结构化数据进行存储；并将完成清洗和转换的机器人作业数据中的非结构化数据和压缩数据预存储至HDFS分布式文件存储系统中，经Spark分布式计算系统对所述非结构化数据和压缩数据进行处理后，将处理结果存储至所述用MongDB分布式存储系统中。

优选地，所述数据存储单元还用于：

以训练测试集、验证集以及其他数据的形式将所述机器人作业数据输出至所述数据分析模块，以便于所述数据分析模块调用和使用。

优选地，所述数据分析模块具体用于：选择预训练模式或自训练模式完成对所述用户选择的算法模型的训练；

所述预训练模式对利用训练测试集中的机器人作业数据对已预先完成的网络结构和网络参数的设置的算法模型进行训练；