[发明专利]大数据文件读取方法、装置、计算机设备及存储介质有效
申请号: | 201811203112.1 | 申请日: | 2018-10-16 |
公开(公告)号: | CN109284260B | 公开(公告)日: | 2023-10-13 |
发明(设计)人: | 袁彪;张要伟 | 申请(专利权)人: | 平安证券股份有限公司 |
主分类号: | G06F16/13 | 分类号: | G06F16/13;G06F12/02 |
代理公司: | 深圳众鼎专利商标代理事务所(普通合伙) 44325 | 代理人: | 谭果林 |
地址: | 518000 广东省深圳市福*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种大数据文件读取方法、装置、计算机设备及存储介质,应用于数据库技术领域,用于解决现有dbf文件的数据读取方式效率低下的问题。本发明提供的方法包括:读取目标dbf文件的头部信息,得到头部信息中的每行字段数据量;将目标dbf文件的首块字段数据映射至指定内存中作为当前字段块;按照每行字段数据量依次逐行获取当前字段块中每行的字段数据;对获取到的字段数据进行解析,得到解析后的数据值;直至获取到目标dbf文件的所有字段数据之前,将目标dbf文件的下一块字段数据映射至指定内存中作为新的当前字段块,返回执行按照每行字段数据量依次逐行获取当前字段块中每行的字段数据的步骤。 | ||
搜索关键词: | 数据文件 读取 方法 装置 计算机 设备 存储 介质 | ||
【主权项】:
1.一种大数据文件读取方法,其特征在于,包括:读取目标dbf文件的头部信息,得到所述头部信息中的每行字段数据量,所述每行字段数据量是指所述目标dbf文件中每一行字段数据的大小;将所述目标dbf文件的首块字段数据映射至指定内存中作为当前字段块,所述首块字段数据是指所述目标dbf文件中位于所述头部信息后且紧靠所述头部信息的预设数据量大小的字段数据;按照所述每行字段数据量依次逐行获取所述当前字段块中每行的字段数据;对获取到的字段数据进行解析,得到解析后的数据值;直至获取到所述目标dbf文件的所有字段数据之前,将所述目标dbf文件的下一块字段数据映射至所述指定内存中作为新的当前字段块,返回执行按照所述每行字段数据量依次逐行获取所述当前字段块中每行的字段数据的步骤,所述下一块字段数据是指所述目标dbf文件中位于当前字段块后且紧靠当前字段块的所述预设数据量大小的字段数据。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安证券股份有限公司,未经平安证券股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201811203112.1/,转载请声明来源钻瓜专利网。