[发明专利]一种基于材料科学实验的数据融合方法及系统

权利要求书

1.一种基于材料科学实验的数据融合方法，其特征在于，包括：

获取材料科学实验数据的存储模板，对所述存储模板进行解析，得到所述存储模板中包含的所有字段，从所述所有字段中提取要构建的字段，并获取要构建的目标文件类型；

连接至预先设置的数据库或者文件系统，将所述存储模板中所有字段的数据全部抽取出来；

根据提取得到的要构建的字段，对抽取的数据进行过滤；

根据获取的要构建的目标文件类型，将过滤后的数据转化为目标数据集。

2.根据权利要求1所述的基于材料科学实验的数据融合方法，其特征在于，所述获取材料科学实验数据的存储模板，对所述存储模板进行解析，得到所述存储模板中包含的所有字段包括：

从预先设置的模板系统中，获取材料科学实验数据的存储模板，其中，模板系统，用于存储材料科学实验数据的存储模板；或，接收用户手动创建的材料科学实验数据的存储模板；

确定所述存储模板的格式类型；

根据所述存储模板的格式类型，对所述存储模板进行数据解析操作，得到所述存储模板中包含的所有字段。

3.根据权利要求2所述的基于材料科学实验的数据融合方法，其特征在于，在得到所述存储模板中包含的所有字段之后，所述方法还包括：

将所有字段统一转为键值对描述的json格式。

4.根据权利要求1所述的基于材料科学实验的数据融合方法，其特征在于，所述连接至预先设置的数据库或者文件系统，将所述存储模板中所有字段的数据全部抽取出来包括：

连接至预先设置的数据库或者文件系统，检索所有基于所述存储模板存储的数据，利用抽取器将所述存储模板中所有字段的数据全部抽取出来；

其中，所述抽取器包括：文件系统连接器和数据库连接器；

所述文件系统连接器，用于连接至操作系统的文件系统；

所述数据库连接器，用于连接数据库。

5.根据权利要求4所述的基于材料科学实验的数据融合方法，其特征在于，所述数据库连接器包括：Postgresql连接器、MySQL连接器、MongoDB连接器、Oracle连接器、Redis连接器中的一个或多个；

Postgresql连接器用于连接postgresql数据库；

MySQL连接器用于连接MySQL数据库；

MongoDB连接器用于连接MongoDB数据库；

Oracle连接器用于连接Oracle数据库；

Redis连接器用于连接Redis数据库。

6.根据权利要求4所述的基于材料科学实验的数据融合方法，其特征在于，在抽取数据的过程中，对数据进行数据清洗操作，处理异常值和缺失值。

7.根据权利要求6所述的基于材料科学实验的数据融合方法，其特征在于，所述根据提取得到的要构建的字段，对抽取的数据进行过滤包括：

根据提取得到的要构建的字段，对清洗后的数据进行过滤，提取出要构建的字段数据进行数据重组，构造新的数据流对象。

8.根据权利要求7所述的基于材料科学实验的数据融合方法，其特征在于，所述获取要构建的目标文件类型包括：

从预先设置的目标文件类型集中，获取要构建的目标文件类型；

其中，所述目标文件类型集包括：xml、json、excel、csv、txt一种或多种目标文件类型。