[发明专利]一种数据监控方法及系统

说明书

技术领域

本发明涉及监控数据处理，更具体地说，涉及一种可高效的进行监控数据处理的数据监控方法及系统。

背景技术

在现有的监控系统中如图1实时，监控装置（如计算机）需要定时或实时获取数据存储介质中数据的变化，该数据存储介质的数据读写工作量大。该监控系统普遍存在着：数据量大、更新快、实时性高的特点；当前计算机硬件的发展，计算机处理器的制造工艺已经足够应付绝大部分系统对处理能力的需求，而在数据存储介质制造工艺上，一直不能与计算机处理器的处理能力同步，如计算机处理器在1秒内可以处理10000条数据向存储介质中写入，而存储技术却不能支持将这些数据在1秒内写入磁道中，尽管可通过一系列技术（光纤传输、磁盘阵列）缓解这种情形，但仍然是远远不能与计算机处理器的处理能力同步。使用现有技术方案，虽然可通过各种方式对数据存储介质的读写能力进行优化，但是因为不能从根本上减少对存储介质的读写次数，而目前整个监控环节的瓶颈又完全集中在数据存储上（目前存储技术的能力与计算机处理器的处理能力不能同步）。这样就往往会因为存储介质的服务器资源耗尽，而导致监控过程不可用，一种常见的场景是，一个GPS监控系统需要监控10000台GPS终端每5秒内的位置信息，而存储介质在计算机的轮询压力下，在5秒内仅能存储5000条位置信息（其余5000条数据会排队等待写入），这时就会发生存储介质服务器资源争用的情形，而影响数据监控的效果、甚至系统崩溃。另外，该监控系统的监控装置很难做到扩容，即在监控装置中部署的监控项目不能任意扩大，因为每增加一个监控项目，也就意味着会增加一定数量的对存储介质的定时轮询压力，而通过提高存储介质硬件配置的方式不能解决这种需求。

发明内容

本发明要解决的技术问题在于，针对现有技术的数据存储介质相对低性能而造成整个监控过程性能瓶颈的缺陷，提供一种可高效平衡监控装置与存储模块之间的资源利用、提高整体监控性能的数据监控方法及系统。

本发明解决其技术问题所采用的技术方案是：构造一种数据监控方法，包括以下步骤：

S1、监控服务端的存储模块获取并存储被监测终端发送过来的外部数据，并将该外部数据发送给监测服务器端的中间处理模块；

S2、监控服务端的中间处理模块接收存储模块发送过来的外部数据并进行解析处理，生成监控结果数据，并将监控结果数据发送给监控装置；

S3、监控服务端的监控装置接收中间处理模块发送过来的监控结果数据，并将所述监控结果数据展示给用户查看。

在本发明所述的数据监控方法中，所述步骤S1进一步包括：

S11、将被监测终端发送过来的外部数据写入存储模块的数据库中；

S12、在数据库接收的外部数据发生变化时，数据触发器被触发，将外部数据通过第一通信单元发送出去。

在本发明所述的数据监控方法中，所述步骤S2进一步包括：

S21、中间处理模块的数据解析单元对存储模块发送的外部数据进行解析处理，生成监控结果数据；

S22、中间处理模块的第二通信单元将监控结果数据发送给监控装置。

在本发明所述的数据监控方法中，所述存储模块与中间处理模块通过TCP协议传送数据，所述中间处理模块与监控装置通过TCP协议传送数据。

在本发明所述的数据监控方法中，所述被监测终端是GPS导航仪或音视频终端。

本发明还构造一种数据监控系统，包括监控服务端及与监控服务端连接的被监测终端，其特征在于，所述监控服务端包括：

存储模块，用于获取并存储被监测终端发送过来的外部数据；并将该外部数据发送给中间处理模块；

所述中间处理模块与所述存储模块连接，用于接收所述存储模块发送过来的所述外部数据并进行解析处理，生成监控结果数据，并将所述监控结果数据发送给监控装置；

所述监控装置与所述中间处理模块连接，用于接收所述中间处理模块发送过来的所述监控结果数据，并将所述监控结果数据展示给用户查看。

在本发明所述的数据监控系统中，所述存储模块将接收的所述外部数据进行分类存储，所述存储模块进一步包括：

数据库，用于将被监测终端发送过来的所述外部数据写入；

数据触发器，与所述数据库连接，用于在数据库接收的外部数据发生变化时，将所述外部数据通过第一通信单元发送出去。

在本发明所述的数据监控系统中，所述中间处理模块进一步包括：

数据解析单元，用于对所述存储模块发送的外部数据进行解析处理，生成监控结果数据；