[发明专利]数据存储的方法及装置在审
申请号: | 201710799472.1 | 申请日: | 2017-09-07 |
公开(公告)号: | CN110019186A | 公开(公告)日: | 2019-07-16 |
发明(设计)人: | 焦张波 | 申请(专利权)人: | 北京国双科技有限公司 |
主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F16/24 |
代理公司: | 北京鼎佳达知识产权代理事务所(普通合伙) 11348 | 代理人: | 王伟锋;刘铁生 |
地址: | 100086 北京市海淀区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 查询条件 维度 数据存储 数据量 数据处理领域 查询数据 混杂 存储 查询 查找 应用 | ||
1.一种数据存储的方法,其特征在于,所述方法包括:
确定满足查询条件的数据在原始数据表中的数据量,所述查询条件包含的维度个数小于所述原始数据表包含的维度个数;
如所述数据量大于第一阈值,则根据所述查询条件建立子数据表,并将满足所述查询条件的数据导入所述子数据表,所述查询条件中包含的维度与所述子数据表中包含的维度相同;
存储所述查询条件和所述子数据表的对应关系,以便在根据所述对应关系查找到所述子数据表后,从所述子数据表中查找满足所述查询条件的数据。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
若所述原始数据表中的数据存在缺失,则根据所述查询条件对应的业务特征,估计满足所述查询条件的数据在所述原始数据表中的数据量,以便基于估计的数据量与所述第一阈值进行比较;
和/或,若满足所述查询条件的数据未生成,则根据所述查询条件对应的业务特征,估计满足所述查询条件的数据在预设时间段后能够生成的数据量,以便基于估计的数据量与所述第一阈值进行比较。
3.根据权利要求1所述的方法,其特征在于,在存储所述查询条件和所述子数据表的对应关系后,所述方法还包括:
实时监控所述子数据表中数据量的变化;
当所述子数据表中的数据量大于第二阈值时,根据预设拆分条件拆分所述子数据表;
更新所述查询条件和所述子数据表的对应关系。
4.根据权利要求3所述的方法,其特征在于,所述方法还包括:
如所述数据量小于或者等于所述第一阈值,则建立公共表;
将满足查询条件的数据导入所述公共表中;
存储所述查询条件和所述公共表的对应关系。
5.根据权利要求4所述的方法,其特征在于,存储所述查询条件和所述公共表的对应关系后,所述方法还包括:
根据查询条件实时监控所述公共表中数据量的变化;
当所述数据量大于第一阈值时,根据所述查询条件建立子数据表,将满足查询条件的数据导入所述子数据表;
存储所述查询条件和所述子数据表的对应关系,并删除所述查询条件和所述公共表的对应关系,以及所述公共表中导入所述子数据表的数据。
6.根据权利要求4或5所述的方法,其特征在于,将满足查询条件的数据导入所述公共表中,包括:
将满足不同查询条件的数据分别导入所述公共表中的不同区域。
7.根据权利要求6所述的方法,其特征在于,所述方法还包括:
接收数据查询请求,所述数据查询请求中携带有查询条件;
根据所述查询条件确定对应的子数据表或公共表;
在确定的子数据表或公共表中进行数据查询。
8.一种数据存储的装置,其特征在于,所述装置包括:
确定单元,用于确定满足查询条件的数据在原始数据表中的数据量,所述查询条件包含的维度个数小于所述原始数据表包含的维度个数;
建立单元,用于当所述数据量大于第一阈值时,根据所述查询条件建立子数据表;
导入单元,用于将满足所述查询条件的数据导入所述子数据表,所述查询条件中包含的维度与所述子数据表中包含的维度相同;
存储单元,用于存储所述查询条件和所述子数据表的对应关系,以便在根据所述对应关系查找到所述子数据表后,从所述子数据表中查找满足所述查询条件的数据。
9.一种存储介质,其特征在于,所述存储介质包括存储的程序,其中,在所述程序运行时控制所述存储介质所在设备执行权利要求1至权利要求7中任意一项所述的数据存储的方法。
10.一种处理器,其特征在于,所述处理器用于运行程序,其中,所述程序运行时执行权利要求1至权利要求7中任意一项所述的数据存储的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京国双科技有限公司,未经北京国双科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710799472.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种基于知识图的智能教学诊断方法
- 下一篇:一种数据分配方法、装置及设备