[发明专利]基于目标存储设备的数据存储方法、装置、设备和介质在审
申请号: | 202110742224.X | 申请日: | 2021-06-30 |
公开(公告)号: | CN113342824A | 公开(公告)日: | 2021-09-03 |
发明(设计)人: | 赵晨星;刘可家;陈哲;管圣腾;杨祺祥 | 申请(专利权)人: | 平安资产管理有限责任公司 |
主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F16/23;G06F16/2455;G06F16/2457;G06F16/2458 |
代理公司: | 广州华进联合专利商标代理有限公司 44224 | 代理人: | 姜晓云 |
地址: | 200135 上海市浦东新区自*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 目标 存储 设备 数据 方法 装置 介质 | ||
1.一种基于目标存储设备的数据存储方法,其特征在于,所述方法包括:
获取数据库更新信息,所述数据库更新信息携带有文件标识;
生成与所述文件标识对应的互斥锁,所述互斥锁用于禁止其他方对所述文件标识所对应的文件的写操作;
根据所述数据库更新信息读取更新数据;
将所述更新数据序列化后写入目标存储设备,所述目标存储设备中存储的数据用于数据使用方的读取。
2.根据权利要求1所述的方法,其特征在于,所述将所述更新数据序列化后写入目标存储设备,包括:
根据所述更新数据从目标存储设备读取差分数据;
将序列化后的更新数据和所述差分数据进行合并后存储至目标存储设备。
3.根据权利要求1所述的方法,其特征在于,所述将所述更新数据序列化后写入目标存储设备,包括:
获取更新数据对应的文件的读取速度;
根据所述读取速度确定对应的目标存储设备;
将更新数据序列化后存储至所确定的目标存储设备中。
4.根据权利要求1至3任意一项所述的方法,其特征在于,所述生成与所述文件标识对应的互斥锁,包括:
判断是否存在与所述文件标识对应的锁文件;
当不存在与所述文件标识对应的锁文件,则生成互斥锁;
当存在与所述文件标识对应的锁文件,则判断所述锁文件对应的互斥锁是否超时;
当所述锁文件对应的互斥锁超时,则生成互斥锁;
当所述锁文件对应的互斥锁未超时,则延时一段时间后,继续判断是否存在与所述文件标识对应的锁文件,直至生成互斥锁。
5.根据权利要求1至3任意一项所述的方法,其特征在于,所述将所述更新数据序列化后写入目标存储设备之后,还包括:
接收数据读取指令,根据所述数据读取指令获取行列索引;
根据所述行列索引从所述目标存储设备读取对应的切片数据,并将所读取的切片数据反馈给数据使用方。
6.根据权利要求5所述的方法,其特征在于,所述目标存储设备包括至少两个存储区,且每个存储区中的文件均携带有结束时间戳;所述根据所述行列索引从所述目标存储设备读取对应的切片数据,包括:
根据所述结束时间戳确定文件对应的目标存储区;
根据所述行列索引从所述目标存储区读取对应的切片数据。
7.根据权利要求6所述的方法,其特征在于,每个存储区中的文件还均携带有开始时间戳;所述根据所述行列索引从所述目标存储设备读取对应的切片数据之后,还包括:
判断所述目标存储区的开始时间戳是否大于结束时间戳;
当所述目标存储区的开始时间戳大于结束时间戳,则重新根据所述行列索引从所述目标存储设备读取对应的切片数据。
8.一种基于目标存储设备的数据存储装置,其特征在于,所述装置包括:
更新信息获取模块,用于获取数据库更新信息,所述数据库更新信息携带有文件标识;
互斥锁生成模块,用于生成与所述文件标识对应的互斥锁,所述互斥锁用于禁止其他方对所述文件标识所对应的文件的写操作;
更新数据读取模块,用于根据所述数据库更新信息读取更新数据;
存储模块,用于将所述更新数据序列化后写入目标存储设备,所述目标存储设备中存储的数据用于数据使用方的读取。
9.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至7中任一项所述方法的步骤。
10.一种计算机存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至7中任一项所述的方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安资产管理有限责任公司,未经平安资产管理有限责任公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110742224.X/1.html,转载请声明来源钻瓜专利网。