[发明专利]加载表格全量数据的方法、装置、计算机设备、存储介质在审
申请号: | 202010847191.0 | 申请日: | 2020-08-21 |
公开(公告)号: | CN111966690A | 公开(公告)日: | 2020-11-20 |
发明(设计)人: | 胥亮;贾淋淋;何毅朗 | 申请(专利权)人: | 西安寰宇卫星测控与数据应用有限公司 |
主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F16/23;G06F16/25;G06F16/27 |
代理公司: | 深圳市精英专利事务所 44242 | 代理人: | 曹祥波 |
地址: | 710000 陕西省西安市国家民用航*** | 国省代码: | 陕西;61 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 加载 表格 数据 方法 装置 计算机 设备 存储 介质 | ||
本发明公开了一种加载表格全量数据的方法、装置、计算机设备、存储介质,方法包括查找REDIS数据库中的键值,获取表格实例关联的所有键;将所述表格实例关联的所有键保存至容器,获取所述容器中首个键值元素的字段名,将所述字段名设置为表格列名;依次遍历所述容器的每一个键值元素,利用键值元素创建行对象;将所述行对象添加至表格中,获取所述行对象对应的键值元素的字段名及值填充到行对象的单元格内。方法封装了表格数据全量加载过程中与REDIS的交互,包括检索键值,创建表格列名,存储行数据,降低了访问REDIS的难度;通过单元格名称给单元格赋值,避免了因REDIS内部数据结构变更引起的哈希类型内字段乱序问题。
技术领域
本发明涉及内存数据库缓存技术领域,尤其涉及一种加载表格全量数据的方法、装置、计算机设备、存储介质。
背景技术
随着互联网技术的快速发展,分布式架构体系的不断完善,用户对软件的响应速度和系统的整体性能提出了更高要求。采用缓存机制解决高并发请求和热点数据存储问题成为大众首选方案。缓存机制利用内存的高速读写特性将数据存储于内存,以提高数据访问速度,降低系统在数据读写部分的性能损耗。
Redis(Remote Dictionary Server)是一款以Key-Value为数据模型,开源免费且支持高性能并发读写的非关系型内存数据库,可支持字符串、列表、集合、有序集合及哈希表等多种数据存储结构,提供了发布订阅消息通信模式,其强大的数据管理能力被广泛应用于高速缓存、数据发布及订阅等场景。REDIS哈希类型是字符串类型的字段和值域的映射表,其(键-字段-值)结构与对象的(标识-属性名-属性值)结构相似,可被用来存储结构简单,无复杂关系查询的对象。
REDIS虽有键值分布式存储,数据之间无耦合性,可扩展性强,查找速度快等诸多优点,但存储的数据无结构化,无耦合性,仅为二进制类型也成为了一个十分明显的缺点。开发者使用如C/C++等强类型相关的语言编程时,需要处理整型、浮点、布尔等编程语言相关数据类型和REDIS数据类型之间的转换,且不利于理解业务数据的相关性和内聚性。同时,Redis提供了许多客户端命令,用于在REDIS服务端执行增删改查等操作,还提供了多种编程语言的客户端API,以便在软件开发过程中完成和Redis数据库的交互。Hiredis即是一个访问Redis数据库的轻量级C语言客户端函数库,基本实现了对Redis协议的最小支持。Hiredis中包含了同步API和异步API,其原生接口的使用方法较为灵活。异步API需配合第三方异步事件库一起工作。比如,Libevent即是一个用C语言编写的开源、轻量级、跨平台,且支持事件驱动和多种I/O多路复用技术的高性能事件通知库,作为底层网络库被广泛应用。
综上所述,软件开发人员使用REDIS前需要花费大量时间和精力学习REDIS命令及其客户端API的使用方法,时间和人力成本较高,在一定程度上影响了软件研发整体进度,也增加了软件后期维护的复杂度。
基于上述原因,本申请人提出了一种表格数据自动同步方法,但是表格同步方法中,表格数据全量加载过程中与REDIS的交互的过程访问REDIS的难度较大,不利于使用者使用,而且在某些情况下还会出现因REDIS内部数据结构变更引起的哈希类型内字段乱序。
公开于该背景技术部分的信息仅仅旨在加深对本发明的总体背景技术的理解,而不应当被视为承认或以任何形式暗示该信息构成已为本领域技术人员所公知的现有技术。
基于上述原因,本申请人提出了一种加载表格全量数据的方法、装置、计算机设备、存储介质。
发明内容
为了满足上述要求,本发明的第一个目的在于提供一种加载表格全量数据的方法。
本发明的第二个目的在于提供一种加载表格全量数据的装置。
本发明的第三个目的在于提供一种计算机设备。
本发明的第四个目的在于提供一种非临时性计算机可读存储介质。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于西安寰宇卫星测控与数据应用有限公司,未经西安寰宇卫星测控与数据应用有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010847191.0/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置