[发明专利]一种数据处理系统以及数据处理方法有效
申请号: | 201310017154.7 | 申请日: | 2013-01-17 |
公开(公告)号: | CN103942195B | 公开(公告)日: | 2017-07-25 |
发明(设计)人: | 曹明;刘健 | 申请(专利权)人: | 中国银联股份有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 中国专利代理(香港)有限公司72001 | 代理人: | 臧霁晨,朱海煜 |
地址: | 200135 上海*** | 国省代码: | 上海;31 |
权利要求书: | 暂无信息 | 说明书: | 暂无信息 |
摘要: | 本发明涉及数据处理方法和数据处理系统。本发明的数据处理方法是对从数据输入节点流向计算节点的数据流进行处理的方法,其特征在于,依次循环进行下述步骤直到对所有数据流完成处理数据量计算步骤,计算所述计算节点当前能够进行计算的数据量大小;数据读取步骤,从所述数据流中读取所述数据量计算步骤计算出的数据量大小的数据并送入所述计算节点;数据计算步骤,所述计算节点对送入的数据进行计算并且获得计算结果。根据本发明,能够防止处理大量数据时的内存溢出并且能够改善计算节点的迭代性能。 | ||
搜索关键词: | 一种 数据处理系统 以及 数据处理 方法 | ||
【主权项】:
一种数据处理方法,是对从数据输入节点流向计算节点的数据流进行处理的方法,其特征在于,依次循环进行下述步骤直到对所有数据流完成处理:数据量计算步骤,计算所述计算节点当前能够进行计算的数据量大小;数据读取步骤,从所述数据流中读取所述数据量计算步骤计算出的数据量大小的数据并送入所述计算节点;数据计算步骤,所述计算节点对送入的数据进行计算并且获得计算结果,在所述数据量计算步骤中,根据所述计算节点当前的空闲内存Z和所述计算节点的因计算所消耗的内存Y,计算所述计算节点当前能够计算的数据量大小X,在所述数据量计算步骤中,所述计算节点对送入的数据进行计算并且获得计算结果,在下次循环到所述数据计算步骤时,以前一次的计算结果为基础,更新计算结果。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国银联股份有限公司,未经中国银联股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201310017154.7/,转载请声明来源钻瓜专利网。
- 上一篇:一种饮水机及其控制装置
- 下一篇:一种可移动式公交车座椅