[发明专利]MapReduce作业处理系统、服务器及处理方法

摘要

本发明提供MapReduce作业处理系统包括基于B/S架构的客户端、MapReduce作业管理模块、MapReduce作业调度模块和存储模块，由于通过该系统客户端的可以设置MapReduce作业信息、接收操作指令，由MapReduce作业管理模块执行MapReduce作业操作指令，MapReduce作业调度模块进行作业调度，免去了作业运行前设置客户端，且根据MapReduce作业信息可周期性调度作业，简化作业的处理流程，提高了作业的处理效率。本发明还提供了MapReduce作业处理服务器及基于上述系统的MapReduce作业提交、查询、激活、挂起、恢复、调度的方法。

主权项

一种MapReduce作业处理系统，其特征在于，包括：基于浏览器/服务器架构的客户端，用于通过浏览器界面设置MapReduce作业信息、接收并发送MapReduce作业的操作指令；MapReduce作业管理模块，用于执行接收到的所述MapReduce作业的操作指令；MapReduce作业调度模块，用于根据所述MapReduce作业信息中包括的MapReduce作业运行参数信息调度MapReduce作业并发送所述MapReduce作业至Hadoop集群中执行；所述MapReduce作业运行参数信息包括：是否周期运行、运行周期和MapReduce端的参数信息中的一种或多种，其中，MapReduce端的参数信息至少包括：Reduce任务个数；存储模块，用于存储与MapReduce作业相关的数据，所述MapReduce作业相关的数据包括：MapReduce作业信息。