[发明专利]一种多源海量数据处理系统及方法

说明书

本发明实施例提供一种多源海量数据处理系统及方法，所述系统包括计算模块和任务管理模块，其中：所述计算模块用于接收多源海量数据，并调取数据接收服务解析所述多源海量数据；所述多源海量数据是根据预先在所述任务管理模块中配置的任务所产生的开源数据；所述计算模块若接收到外界选择的预设模型的确认动作，将解析后的多源海量数据输入所述预设模型，以供分析所述预设模型的输出结果。所述方法使用所述系统。本发明实施例提供的多源海量数据处理系统及方法，通过调取数据接收服务解析多源海量数据，将解析后的多源海量数据输入预设模型，并根据预设模型的输出结果分析多源海量数据，不仅使企业系统高效兼容多源海量数据，还能够有效利用该多源海量数据进行数据分析。

技术领域

本发明实施例涉及数据处理技术领域，具体涉及一种多源海量数据处理系统及方法。

背景技术

随着大数据技术的发展，数据的来源也越来越广泛，然而某些系统并不兼容某些来源的数据，给数据应用带来了难度。

现有技术是通过获取数据来源方的授权，或者根据数据来源方的相应产品编译程序代码来使企业系统兼容多源海量数据。但是数据来源方有很多，导致现有技术的效率尤其低下。

因此，如何避免上述的技术缺陷，并使企业系统高效兼容多源海量数据，并有效利用该多源海量数据进行数据分析，成为亟须解决的问题。

发明内容

针对现有技术存在的问题，本发明实施例提供一种多源海量数据处理系统及方法。

第一方面，本发明实施例提供一种多源海量数据处理系统，所述系统包括计算模块和任务管理模块，其中：

所述计算模块用于接收多源海量数据，并调取数据接收服务解析所述多源海量数据；所述多源海量数据是根据预先在所述任务管理模块中配置的任务所产生的开源数据；

所述计算模块若接收到外界选择的预设模型的确认动作，将解析后的多源海量数据输入所述预设模型，以供分析所述预设模型的输出结果。

第二方面，本发明实施例提供一种多源海量数据处理方法，所述方法包括：

接收多源海量数据，并调取数据接收服务解析所述多源海量数据；所述多源海量数据是根据预先配置的任务所产生的开源数据；

若接收到外界选择的预设模型的确认动作，将解析后的多源海量数据输入所述预设模型，以供分析所述预设模型的输出结果。

第三方面，本发明实施例提供一种电子设备，包括：处理器、存储器和总线，其中，

所述处理器和所述存储器通过所述总线完成相互间的通信；

所述存储器存储有可被所述处理器执行的程序指令，所述处理器调用所述程序指令能够执行如下方法：

接收多源海量数据，并调取数据接收服务解析所述多源海量数据；所述多源海量数据是根据预先配置的任务所产生的开源数据；

若接收到外界选择的预设模型的确认动作，将解析后的多源海量数据输入所述预设模型，以供分析所述预设模型的输出结果。

第四方面，本发明实施例提供一种非暂态计算机可读存储介质，包括：

所述非暂态计算机可读存储介质存储计算机指令，所述计算机指令使所述计算机执行如下方法：

接收多源海量数据，并调取数据接收服务解析所述多源海量数据；所述多源海量数据是根据预先配置的任务所产生的开源数据；

若接收到外界选择的预设模型的确认动作，将解析后的多源海量数据输入所述预设模型，以供分析所述预设模型的输出结果。