[发明专利]一种大数据分析处理方法在审
申请号: | 201711326669.X | 申请日: | 2017-12-13 |
公开(公告)号: | CN108280126A | 公开(公告)日: | 2018-07-13 |
发明(设计)人: | 戴亚娥 | 申请(专利权)人: | 浙江工商职业技术学院 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京君恒知识产权代理事务所(普通合伙) 11466 | 代理人: | 郑黎明;张强 |
地址: | 315000 浙江*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据项 数据段 正则表达式 分解 分析数据 分析处理 大数据 数据分解 数据分析 用户分析 中间数据 关联 | ||
1.一种大数据分析处理方法,其特征在于,包括如下步骤:获取待分析数据、数据段分解正则表达式和与所述数据段分解正则表达式对应的数据项名称列表;根据所述数据段分解正则表达式对所述待分析数据中的数据段进行数据分解,生成数据项值,并将数据项值与所述数据项名称列表进行关联,形成数据项名称与数据项值对应的中间数据对;根据设定统计规则,对所述中间数据对进行统计分析,接收源数据库发送的日志信息,所述日志信息用于表示所述源数据库中的数据修改操作;获取所述日志信息中所述数据修改操作的类型和参数,并将获取的所述数据修改操作的参数绑定到与所述数据修改操作的类型对应的语句模板中,生成数据修改操作语句;运行所述数据修改操作语句,完成对目标数据库中相同存储位置的数据的修改,得到数据分析结果。
2.根据权利要求1所述的大数据分析处理方法,其特征在于,在根据所述数据段分解正则表达式对所述待分析数据中的数据段进行数据分解之前,还包括:获取边界鉴定正则表达式,并对所述待分析数据应用所述边界鉴定正则表达式进行边界鉴定,提取出所述待分析数据中的数据段。
3.根据权利要求1所述的大数据分析处理方法,其特征在于,所述将获取的所述数据修改操作的参数绑定到与所述数据修改操作的类型对应的语句模板中,生成数据修改操作语句之前,还包括:生成所述语句类型。
4.根据权利要求1所述的大数据分析处理方法,其特征在于,在所述运行所述数据修改操作语句之前,还包括:将所述数据修改操作语句添加到语句组;所述运行所述数据修改操作语句,完成对目标数据库中相同存储位置的数据的修改具体包括:在所述语句组的语句类型为预设类型时,运行所述语句组,完成对目标数据库中相同存储位置的数据的修改。
5.根据权利要求1所述的大数据分析处理方法,其特征在于,对所述中间数据对进行统计分析,得到数据分析结果,包括:获取统计分析结果字段表中的结果字段,结果字段包括字段统计公式,所述统计分析结果字段表包括至少一个结果字段;根据字段统计公式,对所述中间数据对中的相应数据进行统计。
6.根据权利要求1所述的大数据分析处理方法,其特征在于,所述结果字段还包括字段值;根据字段统计公式,对所述中间数据对中的相应数据进行统计,包括:将所述中间数据对和字段值代入字段统计公式,计算得到新的字段值;将新的字段值替换所述字段值,并保存至统计分析结果字段表中的对应结果字段中。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浙江工商职业技术学院,未经浙江工商职业技术学院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711326669.X/1.html,转载请声明来源钻瓜专利网。