[发明专利]无人机海量数据处理方法、装置和系统

说明书

本申请公开了一种无人机海量数据处理方法、装置和系统，涉及无人机技术领域，其中无人机海量数据处理方法包括：获取终端发送的数据处理请求，数据处理请求包括数据信息和节点数量，并根据数据信息从文件服务器获取待处理的数据；通过控制服务器获取空闲云集群节点的信息，并根据节点数量，从空闲云集群节点确定进行数据处理的目标云集群节点；按照预设划分规则，将待处理的数据划分为多个子块数据，并配置给目标云集群节点进行数据处理；获取各目标云集群节点处理后的子结果，按照预设合并规则，将各子结果合并为数据处理结果，并将数据处理结果保存在文件服务器，可提高数据处理速度和效率。

技术领域

本申请实施例涉及无人机技术领域，尤其涉及一种无人机海量数据处理方法、装置和系统。

背景技术

不同于常规数据作业流程，微小型无人机采集数据影像存在像片数量多，影像倾角大、重叠度高且不规则、色彩不均匀等问题，导致原始采集数据量较大，如何快速生成测区全景影像图对数据处理技术提出了更高的要求。

当前数据处理技术大部分只是考虑单机作业处理，导致作业耗时很长，影响作业效率，且一般需要人工预处理数据，极大限制数据的自动化批处理。

发明内容

本申请实施例提供一种无人机海量数据处理方法、装置和系统，可解决无人机采集的海量数据处理速度慢、效率低的问题。

本申请实施例一方面提供了一种无人机海量数据处理方法，包括：

获取终端发送的数据处理请求，所述数据处理请求包括数据信息和节点数量，并根据所述数据信息从文件服务器获取待处理的数据；

通过控制服务器获取空闲云集群节点的信息，并根据所述节点数量，从所述空闲云集群节点确定进行数据处理的目标云集群节点；

按照预设划分规则，将所述待处理的数据划分为多个子块数据，并配置给所述目标云集群节点进行数据处理；

获取各所述目标云集群节点处理后的子结果，按照预设合并规则，将各所述子结果合并为数据处理结果，并将所述数据处理结果保存在所述文件服务器。

本申请实施例另一方面提供了一种无人机海量数据处理方法，包括：

终端将待处理数据上传文件服务器，并向管理服务器发出数据处理请求，所述数据处理请求中包括所述待处理数据的数据信息和节点数量；

所述管理服务器根据所述数据信息从所述文件服务器获取待处理的数据，并通过控制服务器获取空闲云集群节点的信息，从所述空闲云集群节点确定进行符合所述节点数量的数据处理的目标云集群节点；

按照预设划分规则，将所述待处理的数据划分为多个子块数据，并配置给所述目标云集群节点进行数据处理；

获取各所述目标云集群节点处理后的子结果，按照预设合并规则，将各所述子结果合并为数据处理结果，并将所述数据处理结果保存在所述文件服务器。

本申请实施例一方面还提供了一种无人机海量数据处理装置，包括：

获取模块，用于获取终端发送的数据处理请求，并根据所述数据处理请求中的数据信息从文件服务器获取待处理的数据；

确定模块，用于通过控制服务器获取空闲云集群节点的信息，并根据所述数据处理请求中的节点数量，从所述空闲云集群节点确定进行数据处理的目标云集群节点；

分配模块，用于按照预设划分规则，将所述待处理的数据划分为多个子块数据，并配置给所述目标云集群节点进行数据处理；

处理模块，用于获取各所述目标云集群节点处理后的子结果，按照预设合并规则，将各所述子结果合并为数据处理结果，并将所述数据处理结果保存在所述文件服务器。

本申请实施例一方面还提供了一种无人机影像数据处理系统，包括：