[发明专利]流数据处理方法、装置及设备在审
申请号: | 201710927234.4 | 申请日: | 2017-09-26 |
公开(公告)号: | CN110147385A | 公开(公告)日: | 2019-08-20 |
发明(设计)人: | 朱学通 | 申请(专利权)人: | 北京国双科技有限公司 |
主分类号: | G06F16/2455 | 分类号: | G06F16/2455 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 王宝筠 |
地址: | 100086 北京市海淀区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 流数据 数据记录 流数据处理 装置及设备 变化趋势 数据查询效率 时间段到达 查询结果 查询指令 流数据源 时间等待 实时获得 时间段 拆开 查询 检测 申请 | ||
1.一种流数据处理方法,其特征在于,所述方法包括:
检测到针对流数据源产生的流数据的查询指令;
对第一时间段内接收到的所述流数据进行拆分,生成对应的数据记录所述第一时间段是从检测到所述查询指令时刻开始的预设时长;
获得查询条件,并按照所述查询条件对所述数据记录进行查询;
输出得到的查询结果。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
清除所述第一时间段内生成的数据记录。
3.根据权利要求1所述的方法,其特征在于,所述对第一时间段内接收到的所述流数据进行拆分,生成对应的数据记录,包括:
从检测到所述查询指令时刻开始计时,并按照预设表结构信息,对接收到的流数据进行拆分;
将拆分得到的每一项数据内容记录到所述预设表结构信息对应的字段下,生成相应时刻接收到的流数据对应的数据记录,直至计时结果达到第一时间段。
4.根据权利要求1所述的方法,其特征在于,所述按照所述查询条件对所述数据记录进行查询,包括:
筛选所述数据记录中满足所述查询条件的目标数据记录,所述目标数据记录包含目标数据;
统计所述目标数据记录的数量,和/或,获得所述目标数据记录中目标数据的变化趋势。
5.根据权利要求1所述的方法,其特征在于,所述对第一时间段内接收到的所述流数据进行拆分,生成对应的数据记录包括:
按照第一时间段内接收到的所述流数据中的分隔符,对所述流数据进行拆分;
利用一个流数据拆分得到的各数据,生成对应的一条数据记录。
6.根据权利要求1所述的方法,其特征在于,所述输出查询结果包括:
将得到的查询结果发送至外部存储设备保存;
对下一个所述第一时间段内接收到的所述流数据进行拆分,生成对应的数据记录,直至所述外部存储设备得到第一数量查询结果。
7.一种流数据处理装置,其特征在于,所述装置包括:
检测模块,用于检测到针对流数据源发送的流数据的查询指令;
拆分模块,用于对第一时间段内接收到的所述流数据进行拆分,生成对应的数据记录,所述第一时间段是从检测到所述查询指令时刻开始的预设时长;
查询模块,用于获得查询条件,并按照所述查询条件对所述数据记录进行查询;
输出模块,用于输出得到的查询结果。
8.一种流数据处理装置数据处理设备,其特征在于,所述设备包括:
通信接口,用于获得流数据源产生的流数据;
存储器,用于存储实现如权利要求1-6任意一项所述的流数据处理方法的程序;
处理器,用于加载并执行所述存储器保存的程序,包括:
检测到针对流数据源产生的流数据的查询指令;
对第一时间段内接收到的所述流数据进行拆分,生成对应的数据记录,所述第一时间段是从检测到所述查询指令时刻开始的预设时长;
获得查询条件,并按照所述查询条件对所述数据记录进行查询;
输出得到的查询结果。
9.一种存储介质,其特征在于,所述存储介质包括存储的程序,其中,在所述程序运行时控制所述存储介质所在设备执行如权利要求1-6中任一项所述的流数据处理方法。
10.一种处理器,特征在于,所述处理器用于运行程序,其中,所述程序运行时执行如权利要求1-6中任一项所述的流数据处理方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京国双科技有限公司,未经北京国双科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710927234.4/1.html,转载请声明来源钻瓜专利网。