[发明专利]一种数据处理方法、装置、服务器和存储介质有效
申请号: | 201811423957.1 | 申请日: | 2018-11-27 |
公开(公告)号: | CN109522312B | 公开(公告)日: | 2020-07-17 |
发明(设计)人: | 火一莽;何明;万月亮 | 申请(专利权)人: | 北京锐安科技有限公司 |
主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F16/25 |
代理公司: | 北京品源专利代理有限公司 11332 | 代理人: | 孟金喆 |
地址: | 100044 北京市海淀区西小口*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据处理 方法 装置 服务器 存储 介质 | ||
1.一种数据处理方法,其特征在于,包括:
对原始数据进行探查定义,得到所述原始数据的关联信息;
根据所述原始数据的关联信息,对所述原始数据进行处理,得到待存储数据;
将所述待存储数据分类存储在数据库集群中,以便为数据需求方提供数据服务;
其中,根据所述原始数据的关联信息,对所述原始数据进行处理,得到待存储数据,包括:
根据原始数据的关联信息中的数据库类型以及预设筛选规则,确定所述数据库集群中各数据库对应的待存储数据。
2.根据权利要求1所述的方法,其特征在于,对原始数据进行探查定义,得到所述原始数据的关联信息,包括:
从数据源中获取原始数据,并确定所述原始数据的元数据;
根据所述原始数据的内容信息,对所述元数据进行探查分析;
根据探查分析结果,定义所述原始数据的关联信息。
3.根据权利要求1所述的方法,其特征在于,所述数据库集群包括:资源库、主题库、知识库以及业务要素索引库中的至少一个。
4.根据权利要求1所述的方法,其特征在于,对原始数据进行探查定义,得到所述原始数据的关联信息之后,还包括:
基于关联信息中的数据资源目录,对有效期内的数据进行管理,所述有效期内的数据包括原始数据、待存储数据以及存储在数据库集群中的数据。
5.根据权利要求1所述的方法,其特征在于,对原始数据进行探查定义,得到所述原始数据的关联信息之后,还包括:
基于关联信息中的数据分级分类、数据资源目录以及数据库集群中存储的数据,为数据需求方提供数据服务。
6.一种数据处理装置,其特征在于,包括:
探查定义模块,用于对原始数据进行探查定义,得到所述原始数据的关联信息;
数据处理模块,用于根据所述原始数据的关联信息,对所述原始数据进行处理,得到待存储数据;
数据存储模块,用于将所述待存储数据分类存储在数据库集群中,以便为数据需求方提供数据服务;
其中,所述数据处理模块具体用于:
根据原始数据的关联信息中的数据库类型以及预设筛选规则,确定所述数据库集群中各数据库对应的待存储数据。
7.根据权利要求6所述的装置,其特征在于,所述探查定义模块包括:
元数据确定单元,用于从数据源中获取原始数据,并确定所述原始数据的元数据;
探查分析单元,用于根据所述原始数据的内容信息,对所述元数据进行探查分析;
信息定义单元,用于根据探查分析结果,定义所述原始数据的关联信息。
8.一种服务器,其特征在于,包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-5中任一所述的数据处理方法。
9.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-5中任一所述的数据处理方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京锐安科技有限公司,未经北京锐安科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811423957.1/1.html,转载请声明来源钻瓜专利网。