[发明专利]基于分布式的电商数据整合方法在审
申请号: | 201610610369.3 | 申请日: | 2016-07-29 |
公开(公告)号: | CN106227862A | 公开(公告)日: | 2016-12-14 |
发明(设计)人: | 孙海峰;张凯鑫;徐宏伟 | 申请(专利权)人: | 浪潮软件集团有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30;G06Q30/02 |
代理公司: | 济南信达专利事务所有限公司37100 | 代理人: | 姜明 |
地址: | 250100 山东*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供一种基于分布式的电商数据整合方法,属于数据整合、数据分布式存储领域,步骤1:配置数据抽取过程,步骤2:配置任务流程的过程,步骤3:配置数据转换,步骤4:配置装载数据,按计划增量或者全部导入数据仓库。步骤5:设定日志输出路径。本发明解决了大数据量、意同形不同、字段转换、任务执行流程等整合的问题。 | ||
搜索关键词: | 基于 分布式 商数 整合 方法 | ||
【主权项】:
基于分布式的电商数据整合方法,其特征在于具体步骤如下:步骤1:配置数据抽取过程,包括抽取方式,选择抽取任务,配置抽取规则,配置存储路径;步骤2:配置任务流程的过程,包括执行时间,是否重复,判断条件,执行脚本,执行文件,过程加密;步骤3:配置数据转换,包括数据库连接,节点连接,数据分区,子服务器,hadoop配置;步骤4:配置装载数据,按计划增量或者全部导入数据仓库;步骤5:设定日志输出路径;步骤6:设置事件提醒。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浪潮软件集团有限公司,未经浪潮软件集团有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201610610369.3/,转载请声明来源钻瓜专利网。
- 上一篇:个人健康数据移动医疗系统
- 下一篇:在案件串并和嫌疑人排查中的数据挖掘方法