[发明专利]一种云计算动态数据整合和调度的方法在审
申请号: | 201910489945.7 | 申请日: | 2019-06-06 |
公开(公告)号: | CN110275926A | 公开(公告)日: | 2019-09-24 |
发明(设计)人: | 钟少君;邓志娟 | 申请(专利权)人: | 江西理工大学 |
主分类号: | G06F16/27 | 分类号: | G06F16/27;G06F16/21;H04L29/08 |
代理公司: | 重庆市信立达专利代理事务所(普通合伙) 50230 | 代理人: | 包晓静 |
地址: | 341000 *** | 国省代码: | 江西;36 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 动态数据整合 关联标记 云计算 数据识别单元 采集数据 处理器 标记生成单元 采集数据存储 处理器输出端 动态数据调度 数据存储模块 数据管理技术 调度 模块输入端 输入端连接 计算处理 接收数据 快速查找 模块处理 实时采集 数据采集 数据处理 数据传输 数据关联 数据接收 数据整合 外部数据 整合 匹配 存储 管理 | ||
本发明公开了一种云计算动态数据整合和调度的方法,具体涉及云计算数据管理技术领域,包括用于数据处理的处理器,所述处理器输入端连接有用于数据接收和数据计算处理的动态数据整合模块,所述处理器输出端连接有用于数据传输的动态数据调度模块,所述动态数据整合模块输入端连接有用于数据采集的外部数据实时采集单元。数据关联标记生成单元生成与采集数据相匹配的关联标记,采集数据与关联标记一起输送,经过动态数据整合模块处理,采集数据存储到数据存储模块中,且数据识别单元同时对关联标记存储,在数据整合时,数据识别单元利用关联标记即可快速查找相对应数据,方便前后接收数据的整合,方便数据的管理。
技术领域
本发明涉及云计算数据管理技术领域,更具体地说,本发明涉及一种云计算动态数据整合和调度的方法。
背景技术
云计算是当前国内外商业和科研机构研究的热点之一,是网格计算、并行计算、分布式计算的发展,是一种新兴的商业计算模式。它采用了成熟的虚拟化技术将数据中心的资源打包为互联网上的用户提供按需服务。作业调度与资源分配是云计算的两个关键技术,云计算的商业性使其关注对用户的服务质量,其虚拟化技术使得资源分配和作业调度不同于以往的并行分布式计算。在网格计算,分布式计算、并行计算中,作业调度和资源分配是广泛研究的内容。传统的作业调度、资源分配研究注重效率,而资源分配的公平性也是关系到用户服务质量、系统的负载均衡性、任务完成效率的一个重要方面。尤其是云计算是一种商业实现,目的在于为不同的用户提供服务、计算能力、存储等,需要更加注重用户需求的满足度。云计算索处理的单次数据很多,动态数据较为庞大,再加上会持续接收到新的动态数据,造成数据查找困难,加上数据的实时采集和传送,现得到的数据与前得到的数据无法快速查找对应,前后动态数据不方便整合,影响数据的处理,不方便数据的整合管理和后续的数据调度。
发明内容
为了克服现有技术的上述缺陷,本发明的实施例提供一种云计算动态数据整合和调度的方法,通过数据关联标记生成单元生成与采集数据相匹配的关联标记,采集数据与关联标记一起输送,经过动态数据整合模块处理,采集数据存储到数据存储模块中,且数据识别单元同时对关联标记存储,在数据整合时,数据识别单元利用关联标记即可快速查找相对应数据,方便前后接收数据的整合,方便数据的管理,以解决上述背景技术中提出的问题。
为实现上述目的,本发明提供如下技术方案:一种云计算动态数据整合和调度的方法,包括用于数据处理的处理器,所述处理器输入端连接有用于数据接收和数据计算处理的动态数据整合模块,所述处理器输出端连接有用于数据传输的动态数据调度模块,所述动态数据整合模块输入端连接有用于数据采集的外部数据实时采集单元,所述外部数据实时采集单元输入端连接有用于设置关联标记的数据关联标记生成单元,所述动态数据整合模块输出端连接有用于将数据处理成模型的数据模型构建模块,所述数据模型构建模块输出端连接有用于存储处理后的数据的数据存储模块,所述动态数据整合模块输出端连接有用于数据检索和关联标记存储的数据识别单元,所述动态数据调度模块输出端连接有用于用户操作的用户终端;
一种云计算动态数据整合和调度的方法,其特征在于:所述具体步骤如下:
步骤一:
动态数据采集:利用外部数据实时采集单元对数据进行采集;
步骤二:
关联标记:利用数据关联标记生成单元将采集到的动态数据根据数据项目制成关联标记,并使采集到的数据携带该数据的标记;
步骤三:
数据输入:将采集到的数据输入到动态数据整合模块中,再将携带的关联标记输入到数据识别单元中;
步骤四:
数据查找:数据识别单元利用接收到的关联标记对数据存储模块中的存储数据仅进行检索,找出与之相对应的前数据,且数据识别单元同时对关联标记存储;
步骤五:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于江西理工大学,未经江西理工大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910489945.7/2.html,转载请声明来源钻瓜专利网。