[发明专利]一种基于弹性分布式数据集的数据处理方法、装置及系统在审
| 申请号： | 201910763269.8 | 申请日： | 2019-08-19 |
| 公开（公告）号： | CN110580203A | 公开（公告）日： | 2019-12-17 |
| 发明（设计）人： | 黄琛;巴继东;何坤;胡志华 | 申请（专利权）人： | 武汉长江通信智联技术有限公司 |
| 主分类号： | G06F9/54 | 分类号： | G06F9/54;G06F9/50 |
| 代理公司： | 42222 武汉科皓知识产权代理事务所(特殊普通合伙) | 代理人： | 罗飞 |
| 地址： | 430074 湖北省武*** | 国省代码： | 湖北;42 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明提供了一种基于弹性分布式数据集的数据处理方法、装置及系统，其中的数据处理方法包括：在内存集群上创建RDD数据模型；设置RDD数据模型的可操作RDD微服务集合以及数据操作模式，以使可操作RDD微服务集合中的微服务根据数据操作模式以并行的方式使用RDD数据模型，并通过RDD操作写入各自需共享的数据。本发明可以实现提高存储空间利用率和数据处理效率的技术效果。 | ||
| 搜索关键词： | 数据模型 数据操作模式 服务集合 数据处理 可操作 存储空间利用率 数据处理效率 分布式数据 装置及系统 方式使用 技术效果 集群 并行 写入 共享 创建 服务 | ||
【主权项】：
1.一种基于弹性分布式数据集的数据处理方法，其特征在于，包括：/n在内存集群上创建RDD数据模型；/n设置RDD数据模型的可操作RDD微服务集合以及数据操作模式，以使可操作RDD微服务集合中的微服务根据数据操作模式以并行的方式使用RDD数据模型，并通过RDD操作写入各自需共享的数据。/n
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于武汉长江通信智联技术有限公司，未经武汉长江通信智联技术有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201910763269.8/，转载请声明来源钻瓜专利网。
- 上一篇：服务器系统内消息的处理方法、装置及系统
- 下一篇：数据存储设备和数据存储系统
