[发明专利]数据处理的方法及装置在审
| 申请号： | 202010881197.X | 申请日： | 2020-08-27 |
| 公开（公告）号： | CN114116790A | 公开（公告）日： | 2022-03-01 |
| 发明（设计）人： | 龚陈继;杨仲凯;崔宝龙;翁凯玲 | 申请（专利权）人： | 华为技术有限公司 |
| 主分类号： | G06F16/2455 | 分类号： | G06F16/2455;G06F16/2458;G06F16/182 |
| 代理公司： | 北京同达信恒知识产权代理有限公司 11291 | 代理人： | 张翠华 |
| 地址： | 518129 广东*** | 国省代码： | 广东;44 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本申请公开了一种数据处理的方法及装置，用以解决分析耗时长、效率低的问题。主节点在选择执行各个任务的节点时，既结合节点的磁盘的数据分布情况，还结合各个节点缓存中的数据分布情况，来确定执行各个任务的节点。执行任务的节点复用缓存中的数据，从而降低从磁盘读取数据导致的IO开销，并且从缓存读取数据的时延小于从磁盘读取数据的时延，缩短节点执行任务过程中读取数据的耗时，进而提高数据分析效率。另外，缓存数据的利用率较高，防止重复的从磁盘读取数据以及由于频繁的更新读取的数据导致的缓存空间不足，而导致的数据落盘行为。 | ||
| 搜索关键词： | 数据处理 方法 装置 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于华为技术有限公司，未经华为技术有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202010881197.X/，转载请声明来源钻瓜专利网。
- 上一篇：一种水培装置
- 下一篇：高酸原油或高酸渣油热解脱酸的方法及装置
