[发明专利]煤矿数据分布式分发方法、系统、设备及可读存储介质

说明书

本发明提供了煤矿数据分布式分发方法、系统、设备及可读存储介质，使用煤矿数据传输管道传输煤矿数据，实现煤矿数据接入的可靠性与顺序性，管道中数据实时推送到后端煤矿智能应用中，保证数据的实时性；使用单个煤矿数据传输管道为不同的后端煤矿智能应用推送数据，保证后端煤矿智能应用所需数据种类的多样性，解决煤矿数据分发的问题。将煤矿数据传输管道以分布式的形式运行在集群中不同机器上，保证煤矿数据的冗余性与集群的高可用性；当煤矿数据种类与智能应用个数增多，原有集群负载过重时，只需增加集群机器数量，煤矿数据传输管道会自动均匀分布到不同集群中不同机器上，保证煤矿数据接入、分发功能的可扩展性。

技术领域

本发明涉及煤矿智能应用技术领域，具体为煤矿数据分布式分发方法、系统、设备及可读存储介质。

背景技术

随着大数据与人工智能技术的逐步成熟，煤矿建设开始尝试向智能矿山建设的目标靠拢。智能矿山的建设通常会全面覆盖煤炭的生产、销售、管理等业务环节，且各个环节又涉及到类别繁多的煤矿数据与智能应用，而往往一个煤矿智能应用需要多种煤矿数据做支撑，并且随着煤矿数据种类与智能应用个数的增加，为煤矿数据的可靠接入与分发带来了困难。具体来讲分为以下三点：

1.煤矿数据时时刻刻都在产生，当数据产生的速度大于煤矿智能应用的处理速度时，会造成煤矿数据的丢失；当煤矿智能应用需要强实时性数据时，接入的煤矿数据先存入数据库后从数据库读取，这将降低数据的实时性，以上问题为煤矿数据的可靠接入带来了挑战。

2.当多个煤矿智能应用都需要获取同一种煤矿数据，或者一个煤矿智能应用需要获取多种不同的煤矿数据时，需要捋清数据来源及该数据为哪些智能应用服务，这就为煤矿数据的分发带来了挑战。

3.当煤矿数据种类及煤矿智能应用个数增多时，需要完成新增煤矿数据的接入并保证新增智能应用可获取所需数据，还需保证原有智能应用获取数据不受影响，这为煤矿数据接入、分发功能的可扩展性带来了挑战。

发明内容

针对现有技术中煤矿智能应用存在煤炭数据接入与分发的问题，本发明提供煤矿数据分布式分发方法、系统、设备及可读存储介质，有效的将煤矿数据统一接入，并分发到不同的煤矿数据传输管道中，在管道中进行缓冲保存，使得煤矿数据不丢失，有效的保证了煤矿数据的冗余性及煤矿数据接入分发功能的可扩展性。

本发明是通过以下技术方案来实现：

一种煤矿数据分布式分发方法，包括如下步骤：

步骤1，在煤矿数据源中获取煤矿数据，并发送至管道分发器；

步骤2，管道分发器接收到煤矿数据后向分布式协调中心发送信息获取请求，并将数据信息发送至煤矿数据传输管道单元内；

步骤3，煤矿数据传输管道单元分布多组机器，机器内排布多根煤矿数据传输管道，煤矿数据传输管道内的数据信息对应传输至后端煤矿智能应用中，完成数据分发传输；

所述煤矿数据传输管道单元中机器内的数据信息与后端煤矿智能应用内的传输方式包括一个数据输出管道对应一个应用或一个数据输出管道对应多个应用。

优选的，步骤1中，所述煤矿数据源包括传感器和前端设备，所述传感器和前端设备分别产生煤矿数据并发送至管道分发器。

优选的，步骤2中，管道分发器向分布式协调中心发送信息获取集群中现有机器与管道信息时，当分布式协调中心查询煤矿数据传输管道单元内没有煤矿数据传输管道或者煤矿数据传输管道的机器无法满足需要时，分布式协调中心向管道分发器反馈信号后，管道分发器发送创建管道请求，分布式协调中心将管道创建命令推送到已经注册过的机器上，在机器中进行煤矿数据传输管道的创建，煤矿数据传输管道创建完成后，管道分发器将继续发送数据信息至煤矿数据传输管道单元中完成数据传输任务。