[发明专利]数据处理方法、装置及电子设备有效
申请号: | 201711058820.6 | 申请日: | 2017-11-01 |
公开(公告)号: | CN107943846B | 公开(公告)日: | 2021-05-11 |
发明(设计)人: | 王永强;哈斯布和;罗长平;张淑颖;张利斌;张秉尧;宋云平 | 申请(专利权)人: | 内蒙古科电数据服务有限公司 |
主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F16/23 |
代理公司: | 北京威禾知识产权代理有限公司 11838 | 代理人: | 王月玲 |
地址: | 011517 内蒙古自治区呼和浩特市和林格尔*** | 国省代码: | 内蒙古;15 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据处理 方法 装置 电子设备 | ||
1.一种数据处理方法,应用于内存数据库,其特征在于,包括:接收代理接口发送的sql请求,根据所述sql请求确定待处理数据表和所述待处理数据表对应的数据属性信息,其中,所述代理接口中存储有各数据表与内存数据库的对应关系,所述内存数据库为分布式内存数据库;
从预先建立的数据表加载记录库中查找是否存在所述待处理数据表的加载记录;
若存在所述待处理数据表的加载记录,确定所述数据属性信息是否存在于所述待处理数据表的加载记录中;
若所述数据属性信息存在于所述待处理数据表的加载记录中,根据所述sql请求对所述待处理数据表进行处理,并返回处理结果;
若不存在所述待处理数据表的加载记录,根据所述数据属性信息,确定所述待处理数据表中的待加载数据;
从磁盘数据库中加载所述待处理数据表中的待加载数据;
在所述数据表记载记录库中记录所述待处理数据表的属性信息和所述待处理数据表对应的数据属性信息;
若至少一个所述数据属性信息不存在于所述待处理数据表的加载记录中,根据不存在于所述待处理数据表的加载记录中的至少一个所述数据属性信息,确定所述待加载数据;
从磁盘数据库中加载所述待处理数据表中的待加载数据;
在所述数据表记载记录库中更新所述待处理数据表的属性信息和所述待处理数据表对应的数据属性信息;
其中,所述数据属性信息包括列的信息类别和行标识,用于确定该数据表中加载到内存数据库中的数据;
进一步包括:确定所述内存数据库中存储的数据表和所述数据表中存储的数据;
监测在磁盘数据库所述数据表中的所述数据是否发生更新;
若所述数据表中的所述数据发生更新,将所述更新同步到所述内存数据库中存储的所述数据表中。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
在所述数据表记载记录库中更新所述待处理数据表的属性信息。
3.一种数据处理装置,应用于内存数据库,其特征在于,包括:
接收模块,用于接收代理接口发送的sql请求,根据所述sql请求确定待处理数据表和所述待处理数据表对应的数据属性信息,其中,所述代理接口中存储有各数据表与内存数据库的对应关系,所述内存数据库为分布式内存数据库;
查找模块,用于从预先建立的数据表加载记录库中查找是否存在所述待处理数据表的加载记录;
第一确定模块,用于若存在所述待处理数据表的加载记录,确定所述数据属性信息是否存在于所述待处理数据表的加载记录中;
处理模块,用于若所述数据属性信息存在于所述待处理数据表的加载记录中,根据所述sql请求对所述待处理数据表进行处理,并返回处理结果;
第二确定模块,用于若不存在所述待处理数据表的加载记录,根据所述数据属性信息,确定所述待处理数据表中的待加载数据;
第一加载模块,用于从磁盘数据库中加载所述待处理数据表中的待加载数据;
记录模块,用于在所述数据表记载记录库中记录所述待处理数据表的属性信息和所述待处理数据表对应的数据属性信息;
第三确定模块,用于若至少一个所述数据属性信息不存在于所述待处理数据表的加载记录中,根据不存在于所述待处理数据表的加载记录中的至少一个所述数据属性信息,确定所述待加载数据;
第二加载模块,用于从磁盘数据库中加载所述待处理数据表中的待加载数据;
第一更新模块,用于在所述数据表记载记录库中更新所述待处理数据表的属性信息和所述待处理数据表对应的数据属性信息;
其中,所述数据属性信息包括列的信息类别和行标识,用于确定该数据表中加载到内存数据库中的数据;
所述装置还包括:
第四确定模块,用于确定所述内存数据库中存储的数据表和所述数据表中存储的数据;
监测模块,用于监测在磁盘数据库所述数据表中的所述数据是否发生更新;
第三更新模块,用于若所述数据表中的所述数据发生更新,将所述更新同步到所述内存数据库中存储的所述数据表中。
4.根据权利要求3所述的装置,其特征在于,所述装置还包括:
第二更新模块,用于在所述数据表记载记录库中更新所述待处理数据表的属性信息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于内蒙古科电数据服务有限公司,未经内蒙古科电数据服务有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711058820.6/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种电子回单生成方法及设备
- 下一篇:企业关系提取方法、装置及存储介质