[发明专利]一种实验数据治理和管理的方法

权利要求书

1.一种实验数据治理和管理的方法，其特征在于，

1)验数据保存；

2)表格在线编辑；

3)对入排标准数据进行结构化。

2.根据权利要求1所述的方法，其特征在于，

通过网络爬虫技术将试验登记公示信息采集后，按照其业务逻辑进行数据拆分，然后将它们重新组合为结构化的数据后存储到到关系型数据库中；同时具有数据操作权限的用户对数据进行初步拆解结构化。

3.根据权利要求2所述的方法，其特征在于，

通过使用网络爬虫技术，将数据采集，经过清洗后并存储到关系型数据库，然后进行数据结构化管理和维护，初次爬取对数据源全量数据进行采集，如果数据有变化，则通过逐条对比全字段是否有某些字段值的变化，如有变化则增量更新。

4.根据权利要求3所述的方法，其特征在于，

爬取方式分类两种：一种是设置周期时间进行自动化定时采集；一种是手动立即爬取。

5.根据权利要求4所述的方法，其特征在于，

在数据爬取过程中进行操作，采用正则表达式的方式，根据网页结构的规则、节点属性便可从中提取网页信息，经过清洗后持久化存储到数据库中。

6.根据权利要求5所述的方法，其特征在于，

基于角色的访问权限控制模型，赋予用户的操作权限，对不同的人访问资源进行权限的控制。

7.根据权利要求6所述的方法，其特征在于，

依据已经治理好的标准字典数据进行部分编辑和维护及可视化展示的操作。

8.根据权利要求7所述的方法，其特征在于，

可通过在线编辑实现对数据等内容进行在线编辑修改，让用户在网站上获得“所见即所得”效果，一个以上的人同时编辑时，通过监控数据变化实时推送更新到客户端，对比修改状态的变化情况。

9.根据权利要求8所述的方法，其特征在于，

实时查看、展现数据库实时的视图；查看详细的变化状况，实现对数个用户对数据并发操作的统一管理。

10.根据权利要求1所述的方法，其特征在于，

入排标准数据结构化是将采集入库后的数据中的入排标准数据部分进行初步结构化处理，将原有的文本数据归一化字典的方式拆解为指标和值的形式，并维护其指标间逻辑关系，满足数据查询要。