[发明专利]一种数据处理系统及数据存储、恢复方法

说明书

本申请示出一种数据处理系统及数据存储、恢复方法。包括：获取至少一个采样点的至少一个特征信号；每个采样点对应至少一个特征信号；获取每个特征信号对应的测量值；根据所有采样点对应的测量值确定至少一个基准值；判断每个测量值与基准值的差值是否在预设阈值范围内；如果存在第一数量的测量值与基准值的差值不在预设阈值范围内，将第一数量的测量值确定为特征测量值，根据特征测量值确定对应的采样点；如果存在第二数量的测量值与基准值的差值在预设阈值范围内，将第二数量的测量值确定为冗余测量值，根据至少一个冗余测量值与预设观测矩阵得到压缩数据。本申请示出的技术方案，能够在采集数据的同时对数据进行筛选处理，提升数据处理效率。

技术领域

本申请涉及数据存储技术领域，尤其涉及一种数据处理系统及数据存储、恢复方法。

背景技术

油气管道的管道内检测技术可以保证油气管道运行过程中的安全性，现有技术中的管道内检测技术包括：漏磁检测技术、涡流检测技术、超声检测技术等，其中，漏磁检测技术包括：轴向漏磁检测技术、横向漏磁检测技术、三维探头检测技术以及全断面漏磁检测技术。上述管道内检测技术均需要海量数据支撑。

现有的数据处理系统通常为边采集边存储的存储方式，将采集的数据全部进行存储后再对全部数据进行处理分析，导致数据存储量大，数据存储过程复杂，数据处理时间长，数据分析不及时等问题。

发明内容

本申请实施例提供了一种数据处理系统及数据存储、恢复方法，应用于油气管道的管道内检测过程，能够解决数据存储量大，数据存储过程复杂，数据处理时间长，数据分析不及时等问题，能够在采集数据的同时对数据进行筛选处理，提升数据处理效率。

第一方面，本申请示出一种数据处理系统，数据处理系统包括：数据采集模块、主控制器模块以及数据存储模块；数据采集模块包括至少一个探头传感器，数据采集模块被配置为：通过至少一个探头传感器获取至少一个采样点的至少一个特征信号；每个采样点对应至少一个特征信号；将至少一个特征信号发送至主控制器模块；主控制器模块与数据采集模块连接，主控制器模块被配置为：获取每个特征信号对应的测量值；根据所有采样点对应的测量值确定至少一个基准值；判断每个测量值与基准值的差值是否在预设阈值范围内，如果存在第一数量的测量值与基准值的差值不在预设阈值范围内，将第一数量的测量值确定为特征测量值，根据特征测量值确定特征测量值对应的采样点；如果存在第二数量的测量值与基准值的差值在预设阈值范围内，将第二数量的测量值确定为冗余测量值，根据至少一个冗余测量值与预设观测矩阵得到压缩数据；并将压缩数据发送至数据存储模块；数据存储模块与主控制器模块连接，数据存储模块被配置为：存储压缩数据。

在一些实施例中，数据处理系统还包括：数据恢复模块；数据恢复模块分别与主控制器模块以及数据存储模块连接，数据恢复模块被配置为：获取压缩数据；将压缩数据根据稀疏表示系数进行恢复，以得到冗余测量值；其中，稀疏表示系数根据冗余测量值与稀疏基矩阵的乘积获取，稀疏基矩阵根据冗余测量值确定以使冗余测量值在稀疏基矩阵中进行稀疏表示；根据冗余测量值确定冗余测量值对应的采样点。

在一些实施例中，数据采集模块中的探头传感器的种类包括：电磁探头传感器、角度探头传感器、应力探头传感器、里程轮传感器以及温度压力传感器。

在一些实施例中，主控制器模块被进一步配置为：获取每个采样点的至少一个特征信号对应的数据地址；根据数据地址获取数据地址对应的所述测量值。