[发明专利]数据处理方法、装置及系统有效
申请号: | 201010623339.9 | 申请日: | 2010-12-30 |
公开(公告)号: | CN102546730A | 公开(公告)日: | 2012-07-04 |
发明(设计)人: | 高丹;徐萌;邓超;江志雄;罗治国;孙少陵;陶涛;段云峰;何鸿凌;谢帆;赵静;张韬;吴明;励崖卉;王之恒;邓青;周福伟 | 申请(专利权)人: | 中国移动通信集团公司 |
主分类号: | H04L29/08 | 分类号: | H04L29/08 |
代理公司: | 北京中誉威圣知识产权代理有限公司 11279 | 代理人: | 彭晓玲;丛芳 |
地址: | 100032 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据处理 方法 装置 系统 | ||
2.根据权利要求1所述的数据处理方法,其特征在于,还包括:
接口机将接收到数据的数据量与预设的阈值进行比较,当数据量大于预设的阈值时,通知所述云计算平台抽取数据或将数据发送到云计算平台,当数据量小于预设的阈值时,通知所述数据处理服务器抽取数据或将数据发送到数据处理服务器;
所述云计算平台对获取的数据进行处理,并将处理后的数据发送至数据处理服务器;
所述数据处理服务器对获取的数据进行处理,并传输到数据仓库中,并将所述云计算平台处理后的数据传输到数据仓库中。
3.根据权利要求2所述的数据处理方法,其特征在于,
所述接口机根据接收到的数据的校验文件确定该数据的数据量大小。
4.根据权利要求2所述的数据处理方法,其特征在于,还包括:
所述接口机监控接收到的数据,并根据接收到数据的校验文件对所述数据进行文件级检查;
当数据出现错误时,所述接口机通知数据源重传数据。
5.根据权利要求2至4中任意一项所述的数据处理方法,其特征在于,所述云计算平台对获取的数据进行处理之前还包括:
所述云计算平台根据抽取数据中的校验文件对所述数据进行文件级检查;
当出现错误时,重新从所述接口机抽取数据。
6.根据权利要求2至4中任意一项所述的数据处理方法,其特征在于,所述云计算平台在对获取的数据进行处理之前还包括:
所述云计算平台对所述数据进行记录级检查,生成记录检查报告,并将所述记录检查报告返回给所述接口机;
当出现错误时,所述接口机通知数据源重传数据。
7.根据权利要求5或6所述的数据处理方法,其特征在于,所述数据处理服务器对所述云计算平台处理后的数据进行传输之前还包括:
所述数据处理服务器对所述云计算平台处理后的数据进行文件级检查。
8.根据权利要求1或2所述的数据处理方法,其特征在于,还包括:
数据仓库将需要云计算平台处理的任务发送给所述云计算平台;
所述云计算平台对所述任务进行处理后,通过所述数据处理服务器传输到所述数据仓库。
9.一种数据处理系统,其特征在于,包括:
云计算平台,将获取的数据进行处理,并将处理后的数据发送至数据处理服务器;
所述数据处理服务器,用于对所述云计算平台处理后的数据进行传输。
10.根据权利要求9所述的数据处理系统,其特征在于,还包括:接口机,其中:
所述接口机,用于将接收到数据的数据量与预设的阈值进行比较,当数据量大于预设的阈值时,通知所述云计算平台抽取数据或将数据发送到云计算平台,当数据量小于预设的阈值时,通知所述数据处理服务器抽取数据或将数据发送到数据处理服务器;
所述云计算平台,用于对获取的数据进行处理,并将处理后的数据发送至数据处理服务器;
所述数据处理服务器,用于对获取的数据进行处理后传输到数据仓库中,并将所述云计算平台处理后的数据传输到数据仓库中。
11.根据权利要求9所述的数据处理系统,其特征在于,还包括:数据仓库,用于存储数据处理服务器传输的数据,将需要云计算平台处理的任务发送给所述云计算平台;
所述云计算平台,还用于对所述任务进行处理后,通过所述数据处理服务器传输到所述数据仓库。
12.一种数据处理服务器,其特征在于,包括:
传输模块,用于接收云计算平台处理后的数据,并传输到数据仓库。
13.根据权利要求12所述的数据处理服务器,其特征在于,还包括:
接收模块,用于从接口机获取数据;
处理模块,用于对获取的数据进行处理;
所述传输模块,用于将处理后的数据传输到数据仓库。
14.根据权利要求12所述的数据处理服务器,其特征在于,还包括:
检查模块,用于对所述云计算平台处理后的数据进行文件级检查。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国移动通信集团公司,未经中国移动通信集团公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201010623339.9/1.html,转载请声明来源钻瓜专利网。