[发明专利]半结构化数据规范处理方法、存储介质及设备

权利要求书

1.一种半结构化数据规范处理方法，其特征在于，包括：

S1、根据业务实体，配置实体模型；

S2、分析获取到的文本文件，识别出含有半结构化数据的内容；

S3、通过解释数据转化为计算机能识别的XML数据；

S4、对所述XML数据进行数据缺失值处理；

S5、根据所述实体模型对S4处理后的数据进行标准化对标处理；

S6、根据所述实体模型，对S5处理后的数据进行对标填值，形成标准格式化的数据结构；

S7、将处理好的数据根据实体模型存入结构化数据库供使用。

2.根据权利要求1所述的半结构化数据规范处理方法，其特征在于，所述实体模型包括实体名称、实体描述、业务说明、实体数据项。

3.根据权利要求2所述的半结构化数据规范处理方法，其特征在于，所述实体数据项包括：数据项名称、数据项Key值、数据项键值、数据项类型、数据项格式校验规则、数据项对标值。

4.根据权利要求3所述的半结构化数据规范处理方法，其特征在于，步骤S2中，识别出的含有半结构化数据的内容包括半结构化数据中的实体及实体间的上下位关系。

5.根据权利要求4所述的半结构化数据规范处理方法，其特征在于，步骤S4中，所述数据缺失值处理的方法包括：①无效数据排除；②通过其他数据项提取补充缺失值；③使用数据的均值来填充；④用众数填充。

6.根据权利要求5所述的半结构化数据规范处理方法，其特征在于，步骤S5中，对数据进行标准化对标，具体为：根据第一步骤业务实体配置的标准化代码，按数据项键值对标，并对源数据增加标准化代码值。

7.根据权利要求6所述的半结构化数据规范处理方法，其特征在于，步骤S6中，是将有标记标准化代码的数据读取到数据流，以Key值进行对标填值，形成标准格式化的数据结构。

8.一种存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至7任意一项所述的半结构化数据规范处理方法。

9.一种设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至7任意一项所述的半结构化数据规范处理方法。