[发明专利]数据的流式处理方法、装置及分布式文件系统HDFS在审
| 申请号： | 201910063136.X | 申请日： | 2019-01-23 |
| 公开（公告）号： | CN110046131A | 公开（公告）日： | 2019-07-23 |
| 发明（设计）人： | 冶秀刚 | 申请（专利权）人： | 阿里巴巴集团控股有限公司 |
| 主分类号： | G06F16/14 | 分类号： | G06F16/14;G06F16/182 |
| 代理公司： | 北京国昊天诚知识产权代理有限公司 11315 | 代理人： | 许振新;朱文杰 |
| 地址： | 英属开曼群岛大开*** | 国省代码： | 开曼群岛;KY |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本说明书一个或多个实施例公开了一种数据的流式处理方法、装置及分布式文件系统HDFS，用以实现基于HDFS体系的高时效流式数据处理服务。所述方法应用于分布式文件系统HDFS，包括：接收客户端发送的针对指定文件的数据流式处理任务；其中，所述数据流式处理任务包括所述指定文件对应的流式处理逻辑；基于所述数据流式处理任务，接收所述客户端发送的单位数据；及，将所述单位数据存储至所述指定文件中；监测所述单位数据是否成功存储至所述指定文件中；若是，则按照所述流式处理逻辑对所述单位数据执行相应的流式处理，得到处理结果。 | ||
| 搜索关键词： | 流式处理 单位数据 指定文件 分布式文件系统 数据流 存储 发送 数据处理服务 接收客户端 高时效 客户端 流式 监测 成功 | ||
【主权项】：
1.一种数据的流式处理方法，应用于分布式文件系统HDFS，所述方法包括：接收客户端发送的针对指定文件的数据流式处理任务；其中，所述数据流式处理任务包括所述指定文件对应的流式处理逻辑；基于所述数据流式处理任务，接收所述客户端发送的单位数据；及，将所述单位数据存储至所述指定文件中；监测所述单位数据是否成功存储至所述指定文件中；若是，则按照所述流式处理逻辑对所述单位数据执行相应的流式处理，得到处理结果。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司，未经阿里巴巴集团控股有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201910063136.X/，转载请声明来源钻瓜专利网。
