[发明专利]一种数据解析方法及系统

说明书

技术领域

本发明涉及数据分析技术领域，具体涉及一种数据解析方法及系 统。

背景技术

随着通信技术的不断发展，“数据”作为信息的载体越来越凸显 出它的重要性。由于行业要求、技术特点、性能需求、多方合作、 接口定义等等各方面的因素，“数据”也被赋予了不同的结构特征以 满足不同的需要。

当系统出现问题时，一般采用的是人工对问题产生期间的通信 数据进行解析，以便分析问题产生的原因并提供解决问题的基本思 路。由于数据的多样性和复杂性以及数据量的庞大，使得人工处理 的成本在不断上升的同时，效率却不断下降。

目前对数据的解析没有一套通用简单的方法，当需要对数据进 行解析时，主要通过落地保存的数据文件或者利用网络抓包工具抓 取的网络格式的数据人工进行解析，这样的处理方法存在以下缺陷：

1、解析门槛高。

数据结构面向的是接口开发人员，而现场的工程人员大部分对 于开发不了解，更不用说数据结构的定义了，基本上处理方式是把 现场现象描述连同现场数据一同交由开发人员分析。

2、解析难度大。

在由现场的工程人员向开发人员转述现场情况的过程中，极有 可能由于工作经验和表述能力的不同，对真实情况产生一定的误差， 这也加重了开发人员分析问题的难度。

开发人员拿到待解析的数据时，需要根据数据接口结构的定义 人工的逐一核对解析，此过程很有可能出现人工的错误可能，一旦 出现这种情况，将增大解析的难度甚至误导问题分析。

3、解析成本高。

人工解析多种结构的数据，耗时、费力，对于特殊的行业，紧 急情况发生时，解析数据，定位、解决问题的时间要求很苛刻，对 于维护支持方的压力是巨大。

虽然有的开发方针对自己的数据特点开发了一些解析工具，但 在信息化的时代，多方协作，做种数据结构并存，这些工具应用的 局限性很大。而且根据实际需要数据结构的变更调整也是时常发生， 对于这些解析工具的维护成本将是一笔不小的开支，而且工具的跟 进需要开发人员修改代码以适应新的结构要求也必然导致工具跟进 不及时，此时就只能回归到人工解析的方法了。

发明内容

针对现有技术中的缺陷，本发明提供了一种数据解析方法及系 统，该方法能快速、有效的解析数据，从而轻松、高效的定位并解决 问题。

本发明提出了一种数据解析方法，包括：

获取待解析数据；

对所述待解析数据进行分析，获取所述待解析数据的数据结构；

根据所述数据结构从配置文件存储库中获取与所述数据结构对 应的配置文件，所述配置文件存储库中存有数据结构和配置文件的对 应关系；

根据所述配置文件对所述待解析数据进行解析，获取数据解析结 果。

可选的，所述获取待解析数据包括：

获取可导入落地保存的数据文件作为待解析数据；

或者，

读取网络抓取的数据以及日志中记录的文本数据作为待解析数 据。

可选的，在根据所述数据结构在配置文件存储库中读取与所述数 据结构对应的配置文件之前，还包括：

根据所述数据结构，对所述数据结构对应的待解析数据设置配置 文件；

对所述配置文件进行加密处理并存入所述配置文件库中；

其中，配置文件中存有用于解析数据的处理逻辑。

可选的，在获取数据解析结果之后，还包括：

展示与待解析数据对应的配置文件中的处理逻辑、待解析数据以 及解析数据结果。

可选的，还包括：

根据所述配置文件中的处理逻辑，对解析结果进行校验，判断所 述解析结果是否符合处理逻辑，若不符合，则展示解析错误的原因。

本发明还提出了一种数据解析系统，包括：

第一获取模块，用于获取待解析数据；

数据分析模块，用于对所述待解析数据进行分析，获取所述待解 析数据的数据结构；

第二获取模块，用于根据所述数据结构从配置文件存储库中获取 与所述数据结构对应的配置文件，所述配置文件存储库中存有数据结 构和配置文件的对应关系；

数据解析模块，用于根据所述配置文件对所述待解析数据进行解 析，获取数据解析结果。

可选的，所述第一获取模块还用于：