[发明专利]一种利用数据结构控制的数据处理与数据分析框架有效
申请号: | 201710295502.5 | 申请日: | 2017-04-28 |
公开(公告)号: | CN106971007B | 公开(公告)日: | 2021-05-28 |
发明(设计)人: | 贺俊华;傅玉生;王永波;鲜东 | 申请(专利权)人: | 成都优易数据有限公司 |
主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F16/28;G06F16/14 |
代理公司: | 成都弘毅天承知识产权代理有限公司 51230 | 代理人: | 李春芳 |
地址: | 611730 四川省成都市郫县德源镇(菁*** | 国省代码: | 四川;51 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供了一种利用数据结构控制数据处理与数据分析过程的技术框架,框架名称:Hyong,属于大数据框架技术领域。基于业务的数据分析过程是由数据处理过程在数据运算层面来实现的,同时,数据处理和数据分析过程都需要一系列标准化的控制和保护机制。通过对数据处理和数据分析过程的高度抽象,把两个过程的控制和保护以数据结构的方式进行封装。通过开发实施Hyong技术框架,可以把数据处理和数据分析流程以系统化的方式进行整合,并利用基础的数据结构的方式来执行控制,使技术框架具有极高的通用性和极佳的性能表现。 | ||
搜索关键词: | 一种 利用 数据结构 控制 数据处理 数据 分析 框架 | ||
【主权项】:
一种利用数据结构控制的数据处理方法,其特征在于,包括以下步骤:步骤1、定义源数据的元数据和定义源数据数据流操作的结构化抽象;步骤2、选择源数据的计算框架,在该计算框架内,定义源数据数据流操作的控制方式和保护机制,控制方式和保护机制作为流程协议的元语;步骤3、至少将元数据、结构化抽象和流程协议元语封装在同种数据结构中;步骤4、按元数据定义将源数据抽取至计算框架内,通过数据结构解析流程协议元语为计算框架的参数,确定运算的模式和通道后在计算框架内执行运算,获得结果集合。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于成都优易数据有限公司,未经成都优易数据有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201710295502.5/,转载请声明来源钻瓜专利网。