[发明专利]一种数据处理方法、装置及存储介质在审
申请号: | 201911407458.8 | 申请日: | 2019-12-27 |
公开(公告)号: | CN111177504A | 公开(公告)日: | 2020-05-19 |
发明(设计)人: | 刘新;秦文礼 | 申请(专利权)人: | 深圳市元征科技股份有限公司 |
主分类号: | G06F16/906 | 分类号: | G06F16/906;G06F16/901;G06F16/9035;G06Q10/00 |
代理公司: | 广州三环专利商标代理有限公司 44202 | 代理人: | 熊永强;彭程 |
地址: | 518000 广东省深圳市龙*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据处理 方法 装置 存储 介质 | ||
1.一种数据处理方法,其特征在于,包括:
获取待处理数据;
将所述待处理数据划分为多个数据块;
关联所述多个数据块;
对关联后的多个数据块分别进行结构化处理,得到第一结构化数据。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
根据所述待处理数据创建倒排表集,所述倒排表集包括多个倒排表;
根据所述多个倒排表对所述第一结构化数据进行重组,得到第二结构化数据。
3.根据权利要求1所述的方法,其特征在于,所述对关联后的多个数据块分别进行结构化处理,得到第一结构化数据包括:
对关联后的多个数据块进行预处理,得到预处理后的多个数据块;
按照存储的结构网络,对所述预处理后的多个数据块进行结构化处理,得到第三结构化数据,所述第三结构化数据包括多个结构数据,所述多个结构数据中每个结构数据包括多个数据;
根据数据之间的关联度将所述多个结构数据中不同结构数据中的数据进行关联,得到第一结构化数据。
4.根据权利要求3所述的方法,其特征在于,所述对关联后的多个数据块进行预处理,得到预处理后的多个数据块包括:
提取关联后的多个数据块包括的特征;
根据所述特征对关联后的多个数据块进行分类,得到多类数据块;
剔除所述多类数据块中的异常数据,得到预处理后的多个数据块。
5.根据权利要求4所述的方法,其特征在于,所述对关联后的多个数据块进行预处理,得到预处理后的多个数据块还包括:
根据所述待处理数据对应的规则,对关联后的多个数据块包括的数据的格式和表达进行处理;
所述根据所述特征对关联后的多个数据块进行分类,得到多类数据块包括:
根据所述特征对处理后的多个数据块进行分类,得到多类数据块。
6.根据权利要求5所述的方法,其特征在于,所述方法还包括:
剔除所述待处理数据中的重复数据;
所述将所述待处理数据划分为多个数据块包括:
将去重后的待处理数据划分为多个数据块;
所述根据所述待处理数据创建倒排表集包括:
根据所述去重后的待处理数据创建倒排表集。
7.根据权利要求1-6任一项所述的方法,其特征在于,所述方法还包括:
接收用于查询第一数据的查询指令;
确定所述第一数据所属关联后的结构数据;
从所述第一结构化数据的所述关联后的结构数据中查询所述第一数据。
8.一种数据处理装置,其特征在于,包括:
获取模块,用于获取待处理数据;
划分模块,用于将所述待处理数据划分为多个数据块;
关联模块,用于关联所述多个数据块;
处理模块,用于对关联后的多个数据块分别进行结构化处理,得到第一结构化数据。
9.一种数据处理装置,其特征在于,包括处理器和存储器,所述处理器和所述存储器相互连接,其中,所述存储器用于存储计算机程序,所述计算机程序包括程序指令,所述处理器用于调用所述程序指令执行如权利要求1-6任一项所述的数据处理方法。
10.一种计算机可读存储介质,其特征在于,所述存储介质存储有计算机程序,所述计算机程序包括程序指令,所述程序指令当被处理器执行时使所述处理器执行如权利要求1-6任一项所述的数据处理方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市元征科技股份有限公司,未经深圳市元征科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911407458.8/1.html,转载请声明来源钻瓜专利网。