[发明专利]数据索引方法、数据查询方法及电子设备有效
申请号: | 201710824712.9 | 申请日: | 2017-09-13 |
公开(公告)号: | CN107644070B | 公开(公告)日: | 2020-09-15 |
发明(设计)人: | 高翅 | 申请(专利权)人: | 北京柠檬微趣科技股份有限公司 |
主分类号: | G06F16/13 | 分类号: | G06F16/13 |
代理公司: | 北京超凡志成知识产权代理事务所(普通合伙) 11371 | 代理人: | 王术兰 |
地址: | 100037 北京市西城*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 索引 方法 查询 电子设备 | ||
1.一种数据索引方法,其特征在于,包括:
按照数据文件对应的多个数据记录中预设字段的字段值的顺序,创建所述数据文件的聚集索引,各个所述数据记录在所述数据文件中的位置偏移量不同;
为所述数据文件中的多个数据记录绘制字段值所对应的位置偏移量分布;
对各个字段值所对应的位置偏移量分布进行曲线拟合,得到拟合函数,以便于根据待查询数据记录中预设字段的字段值确定位置偏移量,进而根据确定的所述位置偏移量获取数据记录;
所述对所述各个字段值所对应的位置偏移量分布进行曲线拟合,得到拟合函数,包括:
对多个字段值所对应的位置偏移量分布进行曲线拟合,得到拟合函数;
根据所述拟合函数,计算得到各个数据记录的位置偏移量;
在多个所述数据记录对应的实际的位置偏移量与计算得到的位置偏移量之间的偏差值均小于预设阈值时,确定所述拟合函数满足预设条件,保留所述拟合函数;
当所述拟合函数不满足预设条件时,将多个字段值划分为两个字段值集合;
针对每个所述字段值集合,分别对多个字段值所对应的位置偏移量分布进行曲线拟合,得到拟合函数。
2.根据权利要求1所述的数据索引方法,其特征在于,所述对所述各个字段值所对应的位置偏移量分布进行曲线拟合,得到拟合函数,还包括:
当仅存在一个拟合函数满足预设条件时,将不满足预设条件的拟合函数对应的字段值集合中的多个字段值再次划分为两个字段值集合;
将再次划分得到的字段值集合中邻接满足预设条件的拟合函数的字段值集合,和,与预设条件的任一拟合函数对应的字段值集合组合后进行曲线拟合,得到拟合函数;
根据所述拟合函数,计算得到各个数据记录的位置偏移量,直至得到的拟合函数满足预设条件。
3.根据权利要求2所述的数据索引方法,其特征在于,所述对所述各个字段值所对应的位置偏移量分布进行曲线拟合,得到拟合函数,还包括:
在不满足预设条件的拟合函数对应的字段值集合中仍剩余若干个字段值,且将剩余的字段值与满足预设条件的拟合函数进行曲线拟合得到的拟合函数不满足预设条件时,在剩余的各个字段值中选择若干个字段值,其中,选择的若干个字段值及与字段值对应的各个位置偏移量单调递增,且,任意相邻的两个位置偏移量之间的差值为预设阈值;
为选择的各个字段值及其对应的位置偏移量分别利用原始索引方式建立索引,所述原始索引方式包括B+树索引方式。
4.根据权利要求1所述的数据索引方法,其特征在于,所述对所述各个字段值所对应的位置偏移量分布进行曲线拟合,得到拟合函数,还包括:
当所述拟合函数不满足预设条件时,确定各个所述实际的位置偏移量及其对应的字段值;
在确定的各个字段值中,判断是否存在任意两个相邻的字段值之间的差值大于预设阈值;
当存在任意两个相邻的字段值之间的差值大于预设阈值时,在数据文件中在差值大于预设阈值的两个相邻的字段值之间插入空白记录,以使两个相邻的字段值中最大的字段值对应的实际的位置偏移量变化,进而使根据各个字段值所对应的位置偏移量及插入的空白记录拟合得到拟合函数,且所述拟合函数满足预设条件。
5.根据权利要求1所述的数据索引方法,其特征在于,所述对所述各个字段值所对应的位置偏移量分布进行曲线拟合,得到拟合函数,还包括:
当所述拟合函数不满足预设条件时,确定实际的位置偏移量与计算得到的位置偏移量之间偏差值大于预设阈值的数据记录;
为所述数据记录在计算得到的位置偏移量处建立跳转到实际的位置偏移量处的跳转记录,以便根据所述跳转记录,查询到位于所述实际的位置偏移量处的数据记录。
6.根据权利要求1所述的数据索引方法,其特征在于,所述对所述各个字段值所对应的位置偏移量分布进行曲线拟合,得到拟合函数,还包括:
当所述拟合函数不满足预设条件时,确定实际的位置偏移量与计算得到的位置偏移量之间偏差值大于预设阈值的多个数据记录;
建立包含多个数据记录的字段值及实际的位置偏移量之间的对应关系跳转表,以便根据所述跳转表,查询到位于所述实际的位置偏移量处的数据记录。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京柠檬微趣科技股份有限公司,未经北京柠檬微趣科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710824712.9/1.html,转载请声明来源钻瓜专利网。
- 上一篇:高密度监测数据的抽稀方法
- 下一篇:缓存更新方法、装置及数据存储系统
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置