[发明专利]一种智能矿山数据管理系统、方法、设备和可读存储介质

说明书

本发明公开了一种智能矿山数据管理系统、方法、设备和可读存储介质，方法包括以下过程，获取煤矿数据，在煤矿数据中增加质量控制数据形成数据源信息；对数据源信息进行验证，判断是否符合煤矿数据质量的要求，对不符合煤矿数据质量的数据进行标记更新；对符合煤矿数据质量的要求进行储存。质量控制数据包括数据传输信息、标识信息、联系信息和参考信息。数据源信息的验证过程包括验证数据源信息中数据完整性、准确性和时效性；对异常或不规范的数据进行标记，采用数据插补方法、忽略或打回重传的方式对标记数据进行更新。提高煤矿数据在采集汇总、传输和使用过程中的高效性、可用性及易操作性等。

技术领域

本发明属于信息管理技术领域，具体属于一种智能矿山数据管理系统、方法、设备和可读存储介质。

背景技术

随着煤矿数据管理信息化程度的提高，大数据技术在智能矿山中应用的深入，煤矿数据的统一标准化管理成为亟需解决的问题。煤矿数据从采集到使用包括三个传输过程：对于不同煤矿院所而言，需要将各自动化系统所采集的数据传输至煤矿上级管理部门；对于单个煤矿院所而言，首先需将煤矿数据从煤矿院所的自动化系统采集汇总到数据统一存储平台(以下简称存储平台)，随后将存储平台中的数据提供给煤矿智能应用使用。在上述过程中，由于煤矿内各个自动化系统职能不同，管理的数据种类也各不相同，导致各系统输出的数据格式各有不同，使得在存储和使用数据时出现数据质量不高、准确性无法保证及难以追责等问题。

在煤矿智能应用使用数据过程中出现问题时，难以挖掘错误源头。在煤矿数据从采集、传输到使用的过程中，经常出现数据丢失、数据精度不足、数据冗余、数据超期等错误，但由于数据在传输过程中的数据流转记录不清晰，这给错误数据的追根溯源带来了挑战。

现有的煤矿数据统一管理标准没有明确规定在煤矿院所自动化系统提交上传数据时，数据源对于其所传输数据的文件格式、数据格式的描述规范；对于所传输的数据，没有明确的数据质量要求描述规范；对于错误数据，缺少对其进行纠正和标注的参考标准；在数据传输过程中，缺少对数据流转关系记录的要求。

发明内容

为了解决现有技术中存在的问题，本发明提供一种智能矿山数据管理系统、方法、设备和可读存储介质，提高煤矿数据在采集汇总、传输和使用过程中的高效性、可用性及易操作性等。

为实现上述目的，本发明提供如下技术方案：

一种智能矿山数据管理方法，包括以下过程，

获取煤矿数据，在煤矿数据中增加质量控制数据形成数据源信息；

对数据源信息进行验证，判断是否符合煤矿数据质量的要求，对不符合煤矿数据质量的数据进行标记更新；

对符合煤矿数据质量的要求进行储存。

优选的，所述质量控制数据包括数据传输信息、标识信息、联系信息和参考信息。

优选的，所述数据源信息的验证过程包括验证数据源信息中数据完整性、准确性和时效性；

对异常或不规范的数据进行标记，采用数据插补方法、忽略或打回重传的方式对标记数据进行更新。

一种智能矿山数据管理系统，包括数据源标准模块、数据质量标准模块和数据存储标准模块；

所述数据源标准模块用于获取煤矿数据，并在煤矿数据中增加质量控制数据形成数据源信息；

所述数据质量标准模块用于验证煤矿数据数据质量；

所述数据存储标准模块用于存储经过质量控制后的煤矿数据。

优选的，所述数据源模块包括数据传输信息模块、标识信息模块、联系信息模块和参考信息模块；

所述数据传输信息模块用于在煤矿数据中增加数据传输信息并保存数据传输信息的时间；