[发明专利]基于大数据进行地形切断面并行计算方法及系统

说明书

本发明公开是关于基于大数据进行地形切断面并行计算方法及系统，涉及勘察设计领域，包括以下步骤：步骤1：建立地形数据模型；步骤2：服务器启动多线程监听服务及大数据处理服务；步骤3：客户端发起到服务器的连接请求；步骤4：建立连接后，客户端发起切断面请求；步骤5：服务器接收切断面请求后，启动切断面处理任务。本公开技术方案极大提升了生产效率，特别是对于海量地形数据量的切断面计算。利用大数据处理技术实现了地形数据分布式存储、数据分片、数据并行处理、数据预加载到内存的功能，解决了传统地形数据无序化存储、切断面计算效率低下的问题，有效促进了地形数据的检索再利用，提升了切断面计算的性能。

技术领域

本发明公开涉及勘察设计领域，尤其涉及基于大数据进行地形切断面并行计算方法及系统。

背景技术

随着勘察设计业务的发展，工程数字化技术的应用越来越广泛，GIS、BIM以及三维协同技术快速的被推广。相对传统二维设计，工程数字化的应用一方面产生了海量的、多样化的信息化数据，现有的关系数据库、文本存储方式已经无法满足对数据高效存储、利用的需求；另一方面传统的数据处理方式在对海量数据的处理已经成为生产效率的制约。地形数据是工程数字化应用的重要支撑数据，数据量大，尤其是在进行地形数据切断面处理时耗时较长，目前尚未有较好的解决方案。

目前，在勘察设计领域，地形数据切断面计算效率已经无法满足工程数字化应用的要求，一方面大量的数据以文件的形式存储在计算机的文件夹中，导致检索困难、重复利用率低；另一方面，对大量地形数据进行切断面计算时采用传统单机模式，效率低下，耗时长，因此设计一种基于大数据进行地形切断面并行计算方法是本领域亟待解决的技术问题。

解决上述技术问题的难度：目前在勘察设计领域对于地形数据切断面处理时耗时较长，无法满足工程数字化应用的要求的情况，尚未有较好的解决方案，存在较多的技术难点，主要包括海量数据的高效存取、地形数据的分块模型建立、切断面算法的并行处理以及分布式处理结果的合并等，均有较大的研究难度。

解决上述技术问题的意义在于：本发明内容提出的基于大数据进行地形切断面进行并行计算的方法有效解决了勘察设计领域大量地形数据切断面效率低下、耗时长的问题，极大的提升了设计工作的效率，为二维设计向三维设计转化奠定了良好的基础，可有效促进勘察设计领域业务升级及发展。

发明内容

为克服相关技术中存在的问题，本发明公开实施例提供了基于大数据进行地形切断面并行计算方法。所述技术方案如下：

根据本发明公开实施例的第一方面，该基于大数据进行地形切断面并行计算方法包括以下步骤：

步骤1：建立地形数据模型；

步骤2：服务器启动多线程监听服务及大数据处理服务；

步骤3：客户端发起到服务器的连接请求；

步骤4：建立连接后，客户端发起切断面请求；

步骤5：服务器接收切断面请求后，启动切断面处理任务。

在一个实施方案中，所述建立地形数据模型步骤中，其具体为，

1.1地形数据预处理，形成规则格网与不规则三角形格网相结合的分块数据，把一个项目所用到的地形数据，拆分成多个规则的矩形，每个矩形由若干不规则三角形组成的格网表示；

1.2建模后的地形数据采用HDFS的机制进行存储。

在一个实施方案中，所述客户端发起到服务器的连接请求步骤，其具体为，服务器监听服务在判定后端资源充足的前提下同意请求并建立与客户端的持久连接；具体包括以下步骤：

步骤3.1获取服务器CPU资源利用率；

步骤3.2获取服务器内存资源利用率；