[发明专利]一种基于T-BOX平台的大数据查询方法

权利要求书

1.一种基于T-BOX平台的大数据查询方法，其特征在于，具体包括：

步骤一、将T-BOX平台的web服务器接收的任务请求做成任务保存在Oracle数据库，且标记每个任务的创建时间、紧急度和优先级；

步骤二、定时检索oracle数据库中未完成的任务，将检索结果数据集发送给任务分发系统；

步骤三、任务分发系统根据创建时间、紧急度和优先级对结果数据集中的任务进行排序，获得任务序列；

步骤四、将任务序列发送至基于堆栈的消息通道中，通过多线程提取消息通道中的任务，根据任务的查询时间长度分成多个子任务，多线程执行子任务访问hbase数据库，每个子程序获取一组目标数据；

步骤五、将获取的目标数据编码生成csv文件，直至一个任务的所有子任务获取的目标数据全部编码后加入csv文件，将多个csv文件压缩成一个压缩包；

步骤六、将压缩包保存到mongo数据库，压缩包的ID保存到oracle数据库，并对完成的任务进行标记；

步骤七、将压缩包发送至对应ID的客户端，客户端定时查询数据库中已完成的任务，完成一个任务的查询。

2.根据权利要求1所述的一种基于T-BOX平台的大数据查询方法，其特征在于，步骤二在检索oracle数据库中未完成的任务后，还对检索后的未完成任务进行检索完成标记。

3.根据权利要求1所述的一种基于T-BOX平台的大数据查询方法，其特征在于，步骤四中将任务序列发送至基于堆栈的消息通道中的方法为：将位于任务序列由尾部依次向首部的顺序放入基于堆栈的消息通道中。

4.根据权利要求1所述的一种基于T-BOX平台的大数据查询方法，其特征在于，步骤四中还包括对每个子程序获取的目标数据进行清洗过滤的步骤，所述清洗过滤的具体方法为：将连续的n条时间相同且数据的值为255或者65535的数据进行删除。