[发明专利]数据处理方法、装置及电子设备在审
申请号: | 202010565082.X | 申请日: | 2020-06-19 |
公开(公告)号: | CN111858158A | 公开(公告)日: | 2020-10-30 |
发明(设计)人: | 梁建群 | 申请(专利权)人: | 北京金山云网络技术有限公司 |
主分类号: | G06F11/14 | 分类号: | G06F11/14 |
代理公司: | 北京博遵律师事务所 11761 | 代理人: | 马佑平 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据处理 方法 装置 电子设备 | ||
1.一种数据处理方法,其中,包括:
对任一数据集合进行快照生成数据快照时,在第一预设存储空间存储所述数据快照,所述数据快照包括数据集合中进行快照的第一源数据以及第一源数据对应的元数据,所述第一源数据对应的元数据包括所述第一源数据的存储参数、所述第一源数据所属数据集合的键值信息、所述第一源数据的预分配的快照版本号以及所述第一源数据的数据序列号;
在对所述第一源数据快照后,若接收到写入的第二源数据时,在第二预设存储空间存储所述第二源数据;
以及,生成所述第二源数据对应的元数据,所述第二源数据对应的元数据包括所述第二源数据的存储参数、所述第二源数据所属数据集合的键值信息、所述第二源数据的预分配的快照版本号,以及所述第二源数据的数据序列号,所述第二源数据的预分配的快照版本号在所述第一源数据的预分配的快照版本号基础上顺序递增,第二源数据的数据序列号根据所述数据集合中的源数据的个数顺序递增;
在第三预设存储空间中存储所述第二源数据对应的元数据;
在接收到对该数据集合的处理操作指令时,根据所述数据集合的源数据、所述数据集合的源数据对应的元数据和/或数据快照,对该数据集合执行处理操作指令;
其中,所述数据集合包括至少一条具有相同键值信息的源数据,所述第二源数据与所述第一源数据属于同一数据集合。
2.根据权利要求1所述的方法,其特征在于,所述对任一数据集合进行快照生成数据快照,包括:
在对该数据集合进行快照时,确定所述数据集合的需进行快照的第一源数据;
根据所述需进行快照的第一源数据及与其对应的元数据确定该数据集合的数据快照。
3.根据权利要求1所述的方法,其特征在于,所述对任一数据集合进行快照生成数据快照,包括:
在接收到快照指令时,对任一数据集合进行快照,以生成数据快照;
或者,
根据预设的快照指令周期,对任一数据集合进行快照,以生成数据快照。
4.根据权利要求2所述的方法,其特征在于,所述方法还包括:
存储所述数据快照和所述数据快照对应的快照链路信息,所述快照链路信息包括所述数据快照所属数据集合的键值信息和所述数据快照的预分配的快照版本号。
5.根据权利要求1所述的方法,其中,所述处理操作指令为数据读取指令,用于读取待读取数据,所述数据读取指令中包括目标键值信息以及目标快照版本号,
所述在接收到对该数据集合的处理操作指令时,根据所述数据集合的源数据、所述数据集合的源数据对应的元数据和/或数据快照,对该数据集合执行处理操作指令的步骤,包括:
获取所述数据读取指令中目标键值信息以及目标快照版本号;
从所述数据集合的所有元数据中查找包括有所述目标键值信息以及目标快照版本号的第一目标元数据,所述数据集合至少包括第一源数据和第二源数据;
将所述第一目标元数据中数据序列号最大的元数据确定为第二目标元数据;
从所述第二目标元数据中确定出所述待读取数据的存储参数;
根据第二目标元数据中的存储参数读取所述待读取数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京金山云网络技术有限公司,未经北京金山云网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010565082.X/1.html,转载请声明来源钻瓜专利网。