[发明专利]实时数据处理方法和装置有效
| 申请号： | 201611270978.5 | 申请日： | 2016-12-30 |
| 公开（公告）号： | CN108268357B | 公开（公告）日： | 2021-10-26 |
| 发明（设计）人： | 李国忠 | 申请（专利权）人： | 阿里巴巴集团控股有限公司 |
| 主分类号： | G06F11/30 | 分类号： | G06F11/30;G06F11/34;G06F16/2458;G06F16/23 |
| 代理公司： | 北京博浩百睿知识产权代理有限责任公司 11134 | 代理人： | 宋子良 |
| 地址： | 英属开曼群岛大开*** | 国省代码： | 暂无信息 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | |||
| 搜索关键词： | 实时 数据处理 方法 装置 | ||
1.一种实时数据处理方法，其特征在于，包括：
收集分布式系统中一个或多个节点接收到的实时数据；
将所有节点上满足相同预定条件的实时数据进行汇总，得到所述相同预定条件下对应的实时数据的总量，其中，所述预定条件用于表征收集到所述实时数据的时间；
计算满足所述相同预定条件的实时数据的齐全度；
其中，所述齐全度用于指示预定时间段内处理完的满足所述相同预定条件的实时数据的总量在汇总的所有节点上的实时数据的总量中的占比，其中，满足所述相同预定条件的实时数据为预定时刻收集到的实时数据，所述预定时间段为所述预定时刻和所述预定时刻之前的时间段。
2.根据权利要求1所述的方法，其特征在于，在收集分布式系统中一个或多个节点接收到的实时数据之后，所述方法还包括：
获取收集到的每个所述实时数据的时间戳，其中，所述时间戳用于指示对该实时数据进行处理的时间。
3.根据权利要求2所述的方法，其特征在于，计算满足所述相同预定条件的实时数据的齐全度包括：在当前时间戳的情况下，将处理完成的所有实时数据的总量在汇总的所有节点上的实时数据的总量中的占比，作为所述齐全度。
4.根据权利要求1至3中任一项所述的方法，其特征在于，将所有节点上满足相同预定条件的实时数据进行汇总，得到所述相同预定条件下对应的实时数据的总量包括：
获取每个分布式节点上的实时数据；
将获取到的所述每个分布式节点上具有相同时间戳的实时数据进行汇总，得到每个时间戳对应的实时数据的总量。
5.一种实时数据处理装置，其特征在于，包括：
收集模块，用于收集分布式系统中一个或多个节点接收到的实时数据；
汇总模块，用于将所有节点上满足相同预定条件的实时数据进行汇总，得到所述相同预定条件下对应的实时数据的总量，其中，所述预定条件用于表征收集到所述实时数据的时间；
计算模块，用于计算满足所述相同预定条件的实时数据的齐全度；
其中，所述齐全度用于指示预定时间段内处理完的满足所述相同预定条件的实时数据的总量在汇总的所有节点上的实时数据的总量中的占比，其中，满足所述相同预定条件的实时数据为预定时刻收集到的实时数据，所述预定时间段为所述预定时刻和所述预定时刻之前的时间段。
6.根据权利要求5所述的装置，其特征在于，所述装置还包括：
获取模块，用于收集所述实时数据之后，获取收集到的每个所述实时数据的时间戳，其中，所述时间戳用于指示对该实时数据进行处理的时间。
7.根据权利要求6所述的装置，其特征在于，
所述计算模块还用于在当前时间戳的情况下，将处理完成的所有实时数据的总量在汇总的所有节点上的实时数据的总量中的占比，作为所述齐全度。
8.根据权利要求5至7中任一项所述的装置，其特征在于，所述汇总模块包括：
获取单元，用于获取每个分布式节点上的实时数据；
汇总单元，用于将获取到的所述每个分布式节点上具有相同时间戳的实时数据进行汇总，得到每个时间戳对应的实时数据的总量。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司，未经阿里巴巴集团控股有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/pat/books/201611270978.5/1.html，转载请声明来源钻瓜专利网。
- 上一篇：用于云和预置应用集成的兼容框架
- 下一篇：一种微扰相位调制DDS信号产生方法
