[发明专利]一种时态监测数据快速可视化方法及系统

说明书

技术领域

本发明涉及物联网、监测等的时态数据可视化领域，特别涉及时态监测数据快速可视化方法及系统。

背景技术

目前对于时态监测数据快速可视化相关功能需求有时态数据查询、时态数据趋势图表、时态数据统计报表等。传统方法是使用关系型数据库，针对每一类时态数据类型设计一张数据表格，针对各功能需要设计访问接口，并最终转化为对数据库表查询的查询语句(SQL)，具体的，其针对不同的时态数据类型如温度、位移、GPS、雨量、泥位、水位等，分别设计相应的数据表格，通过不同的服务方法如根据给定的时间段查询时态记录数据列表、查询给定时间段内的最大、最小、平均等特征值、统计一定时间段内的数据并形成报表，针对各功能需求设计访问接口，最终通过对数据库表查询的查询语句(SQL)实现数据查询、可视化图表和统计报表功能。

但是现有技术中针对基于时态的数据频率比较快，数据量上升很快，随着时间积累，数据量变大，由于底层数据库和数据库查询语句的限制，数据查询效率很低，而且随着数据总量变大，效率变慢的速度越快；在使用过程中，发现查询时间段基本固定，例如：按照小时、日、月等，统计单位最小也基本上也大于小时，而且为整单位；且前端进行图表绘制，所需要的数据表示形式，与后端存储不一致，需要进行转换。

因此，这是本技术领域亟待解决的问题。

发明内容

有鉴于此，有必要提供一种能提高查询速度和响应速度的时态监测数据快速可视化方法及系统。

一种时态监测数据快速可视化方法，所述时态监测数据快速可视化方法包括如下步骤：

S1、建立非关系数据库及缓存数据库；

S2、在缓存数据库中，将各种时态数据使用“数据类型：编号：时间”编码为键，使用json对象作为值存储；

S3、通过数据持久化服务方法，将缓存数据库中的数据存储到非关系数据库中；

S4、在非关系数据库中，使用“数据类型：编号：时间段”编码为主键，将时间段内的数据记录组合为一个大对象存储为值。

一种时态监测数据快速可视化系统，所述时态监测数据快速可视化系统包括如下模块：

数据库模块，用于建立非关系数据库及缓存数据库；

缓存数据库存储模块，用于在缓存数据库中，将各种时态数据使用“数据类型：编号：时间”编码为键，使用json对象作为值存储；

数据持久化服务模块，用于通过数据持久化服务方法，将缓存数据库中的数据存储到非关系数据库中；

非关系数据库存储模块，用于在非关系数据库中，使用“数据类型：编号：时间段”编码为主键，将时间段内的数据记录组合为一个大对象存储为值。

本发明提供一种时态监测数据快速可视化方法及系统，通过结合现有的NoSql技术、缓存技术作为后端数据存储，按定制的时间段和特征值提取条目进行特征值的提取存储，同时按照固定时间段和定制时间段生成统计报表进行存储，与现有技术中采用关系型数据库相比，能够很大程度提升时态数据库的可视化效率。本发明所述时态监测数据快速可视化方法及系统，其使用Nosql技术代替传统的关系型数据库，无需预先定义数据模型，无强制数据模型要求，也无数据库查询语句效率限制；支持集群、横向扩容，有效解除了数据库容量限制的问题；同时根据业务需求，在数据存储层面对原始数据进行预加工处理，有效减轻了前端应用对数据库的查询压力，同时能提高查询速度和响应速度；并将数据时间编码到键中，对固定时间段的查询比传统方法的效率要高；而且针对这些时序数据的应用场景，固定时间段的查询情况更多；前端业务展示和后端存储都使用json数据格式，不需要再单独做数据转换。

附图说明

图1是本发明所述时态监测数据快速可视化方法的架构图；

图2是本发明所述时态监测数据快速可视化方法的流程图；

图3是图2中步骤S3的子流程图；

图4是本发明所述时态监测数据快速可视化系统的结构框图；

图5是图4中缓存数据库存储模块的子结构框图；

图6是图4中数据持久化服务模块的子结构框图；

图7是图4中非关系数据库存储模块的子结构框图。

具体实施方式

为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明，应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

如图1所示，本发明实施例提供一种时态监测数据快速可视化方法，所述时态监测数据快速可视化方法包括如下步骤：