[发明专利]一种数据处理方法及装置有效
申请号: | 201310373788.6 | 申请日: | 2013-08-23 |
公开(公告)号: | CN104424220B | 公开(公告)日: | 2018-07-13 |
发明(设计)人: | 黄晓锋 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京东方亿思知识产权代理有限责任公司 11258 | 代理人: | 彭琼 |
地址: | 英属开曼群岛大开曼*** | 国省代码: | 开曼群岛;KY |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本申请公开了一种数据处理方法及装置,包括:取待处理数据记录的至少一个待处理维度的维度数据;并针对每个待处理维度,根据该待处理维度的维度数据,从预先设定的与该待处理维度对应的多个数据处理单元中,选择将要对该待处理数据记录进行处理的数据处理单元;并将该待处理数据记录分发给选择的数据处理单元;以及由选择的数据处理单元对该待处理数据记录的该待处理维度的维度数据进行处理。采用本申请实施例提供的方案,提高了进行数据处理的效率。 | ||
搜索关键词: | 处理维度 数据处理单元 待处理数据 数据处理 维度 记录 申请 分发 | ||
【主权项】:
1.一种数据处理方法,其特征在于,包括:获取待处理数据记录的至少一个待处理维度的维度数据;针对每个待处理维度,根据该待处理维度的维度数据,从预先设定的与该待处理维度对应的多个数据处理单元中,选择将要对所述待处理数据记录进行处理的数据处理单元;将所述待处理数据记录分发给选择的数据处理单元;所述数据处理单元将接收的所述待处理数据记录保存到数据集中,在保存时,将唯一标识数据的哈希码的后预设数量位相同的数据记录保存到同一个数据集中,使得后续可以基于数据集中保存的数据记录,对新接收的待处理数据记录进行去重处理;由选择的数据处理单元对所述待处理数据记录的该待处理维度的维度数据进行处理。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201310373788.6/,转载请声明来源钻瓜专利网。
- 上一篇:一种产品信息过滤推荐方法和装置
- 下一篇:一种自定义提取目录内容的方法和装置