[发明专利]信息采集方法、装置和电子设备在审
申请号: | 202110925080.1 | 申请日: | 2021-08-12 |
公开(公告)号: | CN113641704A | 公开(公告)日: | 2021-11-12 |
发明(设计)人: | 李江伟 | 申请(专利权)人: | 北京金山云网络技术有限公司 |
主分类号: | G06F16/2453 | 分类号: | G06F16/2453;G06F16/2458 |
代理公司: | 北京超凡宏宇专利代理事务所(特殊普通合伙) 11463 | 代理人: | 徐丽 |
地址: | 100000 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 信息 采集 方法 装置 电子设备 | ||
本发明提供了一种信息采集方法、装置和电子设备,统计预设时间段内,针对目标数据文件中的至少一个数据单元的访问频率;其中的数据文件包括至少一个数据单元;数据单元包括:数据属性和数据属性对应的数据内容;根据至少一个数据单元的访问频率,从至少一个数据单元中确定需要采集统计信息的目标数据单元;采集目标数据单元对应的统计信息。该方式中,根据目标数据文件中每个数据单元在一段时间内的访问频率,确定实际需要采集统计信息的目标数据单元,进而采集目标数据单元对应的统计信息,能够根据实际情况采集统计信息,避免了统计信息中无用信息过多的问题,提高了查询优化器的查询效率,同时降低了网络带宽和内存的占用。
技术领域
本发明涉及数据库技术领域,尤其是涉及一种信息采集方法、装置和电子设备。
背景技术
数据库查询优化中的统计信息是描述数据库中数据表的元数据信息的集合,通常包括行级别的统计信息和列级别的统计信息,是创建高质量的查询路径的基础。通常利用查询优化器,基于统计信息创建高质量的查询路径;所以,统计信息的合理程度通常会关系到查询路径的准确性,进而影响查询效率。相关技术中,通常先设置需要统计的目标属性,再基于这些目标属性采集目标属性对应的统计信息,这种方式中的目标属性相对固定,易导致采集的统计信息中无用信息过多,影响查询优化器的查询效率,同时占用过多的网络带宽和内存。
发明内容
有鉴于此,本发明的目的在于提供一种信息采集方法,以提高查询优化器的查询效率,同时减少网络带宽和内存的占用。
第一方面,本发明实施例提供了一种信息采集方法,包括:统计预设时间段内,针对目标数据文件中的至少一个数据单元的访问频率;其中,目标数据文件包括至少一个数据单元;数据单元包括:数据属性和数据属性对应的数据内容;根据至少一个数据单元的访问频率,从至少一个数据单元中确定需要采集统计信息的目标数据单元;采集目标数据单元对应的统计信息。
进一步的,根据至少一个数据单元的访问频率,从至少一个数据单元中确定需要采集统计信息的目标数据单元的步骤,包括:从至少一个数据单元的访问频率中确定大于或等于预设阈值的目标访问频率;将目标访问频率对应的数据单元,确定为需要采集统计信息的目标数据单元。
进一步的,采集目标数据单元对应的统计信息的步骤,包括:根据目标数据单元包括的数据属性和数据属性对应的数据内容,采集目标数据单元对应的统计信息;其中,统计信息包括:目标数据文件中数据单元的元数据。
进一步的,采集目标数据单元对应的统计信息的步骤,包括:如果目标数据文件中包括新增数据单元,采集新增数据单元对应的统计信息,以及目标数据单元对应的统计信息。
进一步的,采集新增数据单元对应的统计信息,以及目标数据单元对应的统计信息的步骤,包括:根据新增数据单元包括的数据属性和数据属性对应的数据内容,采集新增数据单元对应的统计信息;根据目标数据单元包括的数据属性和数据属性对应的数据内容,采集目标数据单元对应的统计信息。
进一步的,统计预设时间段内,针对目标数据文件中的至少一个数据单元的访问频率的步骤之前,方法还包括:采集指定的数据属性对应的数据单元的初始统计信息;将初始统计信息保存至目标内存。
进一步的,采集目标数据单元对应的统计信息的步骤之后,方法还包括:将目标内存中的初始统计信息更新为目标数据单元对应的统计信息。
进一步的,数据单元包括目标数据文件的数据行或者数据列。
第二方面,本发明实施例提供了一种信息采集装置,包括:访问频率统计模块,用于统计预设时间段内,针对目标数据文件中的至少一个数据单元的访问频率;其中,目标数据文件包括至少一个数据单元;数据单元包括:数据属性和数据属性对应的数据内容;目标数据单元确定模块,用于根据至少一个数据单元的访问频率,从至少一个数据单元中确定需要采集统计信息的目标数据单元;统计信息采集模块,用于采集目标数据单元对应的统计信息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京金山云网络技术有限公司,未经北京金山云网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110925080.1/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种可折叠显示装置
- 下一篇:浅水区海底电缆埋深探测方法及装置
- 信息记录介质、信息记录方法、信息记录设备、信息再现方法和信息再现设备
- 信息记录装置、信息记录方法、信息记录介质、信息复制装置和信息复制方法
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录设备、信息重放设备、信息记录方法、信息重放方法、以及信息记录介质
- 信息存储介质、信息记录方法、信息重放方法、信息记录设备、以及信息重放设备
- 信息存储介质、信息记录方法、信息回放方法、信息记录设备和信息回放设备
- 信息记录介质、信息记录方法、信息记录装置、信息再现方法和信息再现装置
- 信息终端,信息终端的信息呈现方法和信息呈现程序
- 信息创建、信息发送方法及信息创建、信息发送装置