[发明专利]一种大数据分析可视化配置的实现方法在审
申请号: | 201711484581.0 | 申请日: | 2017-12-29 |
公开(公告)号: | CN108182063A | 公开(公告)日: | 2018-06-19 |
发明(设计)人: | 赖清鑫;陈志雄;周华 | 申请(专利权)人: | 福建南威软件有限公司 |
主分类号: | G06F8/34 | 分类号: | G06F8/34;G06F17/30 |
代理公司: | 泉州市文华专利代理有限公司 35205 | 代理人: | 陈云川 |
地址: | 360000 福建省福州市鼓楼区*** | 国省代码: | 福建;35 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 大数据 分析 可视化 配置的 报表展示 分析过程 数据来源 业务建模 结果存入数据库 分布式计算 可视化模型 处理逻辑 存储位置 方式配置 分析计算 数据格式 业务模型 预先配置 运行环境 持久化 挖掘 调用 算法 门槛 输出 配置 发布 展示 开发 | ||
本发明一种大数据分析可视化配置的实现方法,首先进行大数据分析业务建模,将生成的分析业务模型发布到大数据分布式计算的运行环境中,根据分析业务建模中配置的数据来源获取相应的数据进行挖掘分析,得到持久化的分析结果,将分析计算的结果存入数据库中,并调用预先配置的报表展示的可视化模型,最终输出大数据分析展示报表,本发明从数据来源、分析过程使用算法、处理逻辑、分析结果数据格式与存储位置的配置,到分析结果报表展示都以界面可视化方式配置,实现无需编写代码即可完成复杂的大数据分析过程,极大地降低了大数据挖掘分析的门槛,有效提高开发的效率。
技术领域
本发明涉及一种大数据分析可视化配置的实现方法。
背景技术
通过数据交换平台将各种数量巨大、种类繁多的异构数据抽取、转换存储到数据仓库,形成了大数据中心。目前数据中心的数据采用实时流式数据处理、离线数据处理、检索分析等大数据技术实现数据挖掘分析后生成统计分析结果,最终以接口、报表的方式向外提供数据服务,若从数据来源、分析过程使用算法、处理逻辑、分析结果数据格式与存储位置的配置,到分析结果报表展示都以界面可视化方式配置,快速提供数据服务,可以最大限度发挥数据资源的内在价值。
发明内容
本发明的目的在于提供一种大数据分析可视化配置的实现方法,从数据来源、分析过程使用算法、处理逻辑、分析结果数据格式与存储位置的配置,到分析结果报表展示都以界面可视化方式配置,实现无需编写代码即可完成复杂的大数据分析过程,极大地降低了大数据挖掘分析的门槛,有效提高开发的效率。
本发明一种大数据分析可视化配置的实现方法,首先进行大数据分析业务建模,将生成的分析业务模型发布到大数据分布式计算的运行环境中,根据分析业务建模中配置的数据来源获取相应的数据进行挖掘分析,得到持久化的分析结果,将分析计算的结果存入数据库中,并调用预先配置的报表展示的可视化模型,最终输出大数据分析展示报表。
具体包括如下步骤:
步骤1、大数据分析业务建模
通过可视化流程编辑器作为业务流程的编排界面,将数据来源组件、算法组件、数据转换组件、流式计算组件、离线计算组件的各种内置的组件以拖拉的方式组合编排,完成大数据分析业务建模的过程,实现数据采集、数据清洗、数据挖掘分析、分析结果集存储的整个数据处理过程的可视化配置;
步骤2、生成分析业务模型
将步骤1配置的大数据分析业务模型,生成一个可以放到大数据环境进行分布式计算的软件包;
步骤3、将生成的分析业务模型发布到分布式调度环境
将步骤2生成的软件包解析成大数据运行环境可识别的计算机语言发布到分布式调度环境中运行;
步骤4、获取大数据资源进行挖掘分析
根据步骤1分析业务建模中配置的数据来源获取海量数据,并对获取的海量数据进行挖掘分析;
步骤5、经过对大数据资源计算分析后,输出得到数据挖掘分析的结果集、训练集或者验证集;
步骤6、将数据挖掘分析得到的结果集、训练集或者验证集,根据步骤1配置的存储方式进行存储;
步骤7、进行报表展示的可视化建模,配置一个可最终展示的报表样式,得到报表展示的可视化模型,用于对步骤6挖掘分析计算得到的结果集进行展示;
步骤8、通过步骤7的报表展示的可视化模型以及结合步骤6得到的展示结果集,最终输出大数据分析展示报表。
所述的数据来源包括实时采集的数据、数据中心仓库已落地的数据或者第三方的接口来源数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于福建南威软件有限公司,未经福建南威软件有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711484581.0/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种反向编程的方法及系统
- 下一篇:动态表单实现方法及服务器