[发明专利]一种数据处理方法及装置有效
申请号: | 201710210430.X | 申请日: | 2017-03-31 |
公开(公告)号: | CN107085603B | 公开(公告)日: | 2020-04-03 |
发明(设计)人: | 王磊;帅伟良 | 申请(专利权)人: | 北京奇艺世纪科技有限公司 |
主分类号: | G06F16/21 | 分类号: | G06F16/21;G06F16/23 |
代理公司: | 北京柏杉松知识产权代理事务所(普通合伙) 11413 | 代理人: | 项京;马敬 |
地址: | 100080 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据处理 方法 装置 | ||
1.一种数据处理方法,其特征在于,包括:
对数据库中的目标数据进行处理;
完成对所述目标数据的处理后,对比处理后的目标数据的版本号与当前所述数据库中存储的目标数据的版本号是否一致,其中,所述数据库中存储的各数据的版本号是各数据更新时对应更新的;
当所述处理后的目标数据的版本号与当前所述数据库中存储的目标数据的版本号不一致时,重新对所述目标数据进行处理;
所述对数据库中的目标数据进行处理,包括:根据不同的业务需求对数据库中的目标数据进行相应规则的数据处理。
2.根据权利要求1所述的方法,其特征在于,所述完成对所述目标数据的处理后,对比处理后的目标数据的版本号与当前所述数据库中存储的所述目标数据的版本号是否一致的步骤包括:
当有多个进程同时对所述目标数据进行处理时,每一个进程完成对所述目标数据的处理之后,对比处理后的目标数据的版本号与当前所述数据库中存储的所述目标数据的版本号是否一致。
3.根据权利要求1所述的方法,其特征在于,所述方法还包括:
监测所述数据库中存储的数据是否发生更新;
当所述数据发生更新时,同步更新所述数据的版本号。
4.根据权利要求3所述的方法,其特征在于,所述数据库为Hbase数据库,所述监测所述数据库中存储的数据是否发生更新的步骤包括:
通过所述Hbase数据库的协处理器机制,实时监测所述Hbase数据库中的数据是否发生更新;
所述当所述数据发生更新时,同步更新所述数据的版本号的步骤包括:
当所述数据发生更新时,通过所述协处理器机制同步更新所述数据的版本号。
5.根据权利要求3所述的方法,其特征在于,所述同步更新所述数据的版本号的步骤包括:
根据所述数据的当前版本号,以及预设的版本号排序规则,获取所述当前版本号的下一版本号;
将所获取的版本号确定为所述数据的版本号。
6.一种数据处理装置,其特征在于,包括:
第一处理模块,用于对数据库中的目标数据进行处理;
对比模块,用于完成对所述目标数据的处理后,对比处理后的目标数据的版本号与当前所述数据库中存储的目标数据的版本号是否一致,其中,所述数据库中存储的各数据的版本号是各数据更新时对应更新的;
第二处理模块,用于当所述处理后的目标数据的版本号与当前所述数据库中存储的所述目标数据的版本号不一致时,重新对所述目标数据进行处理;
所述第一处理模块,具体用于根据不同的业务需求对数据库中的目标数据进行相应规则的数据处理。
7.根据权利要求6所述的装置,其特征在于,所述对比模块,具体用于当有多个进程同时对所述目标数据进行处理时,每一个进程完成对所述目标数据的处理之后,对比处理后的目标数据的版本号与当前所述数据库中存储的所述目标数据的版本号是否一致。
8.根据权利要求6所述的装置,其特征在于,所述装置还包括:
监测模块,用于监测所述数据库中存储的数据是否发生更新;
更新模块,用于当所述数据发生更新时,同步更新所述数据的版本号。
9.根据权利要求8所述的装置,其特征在于,所述数据库为Hbase数据库,所述监测模块,具体用于通过所述Hbase数据库的协处理器机制,实时监测所述Hbase数据库中的数据是否发生更新;
所述更新模块,具体用于当所述数据发生更新时,通过所述协处理器机制同步更新所述数据的版本号。
10.根据权利要求8所述的装置,其特征在于,所述更新模块,具体用于根据所述数据的当前版本号,以及预设的版本号排序规则,获取所述当前版本号的下一版本号;将所获取的版本号确定为所述数据的版本号。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京奇艺世纪科技有限公司,未经北京奇艺世纪科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710210430.X/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种深孔用组合式镗削刀具
- 下一篇:一种成型刀具