[发明专利]一种基于云计算的海洋档案数据库并行化构建方法和装置在审
申请号: | 201910976596.1 | 申请日: | 2019-10-15 |
公开(公告)号: | CN110716897A | 公开(公告)日: | 2020-01-21 |
发明(设计)人: | 王玉玲;唐兆民;冯华;张小军;吴小玲;吴海萍 | 申请(专利权)人: | 北部湾大学 |
主分类号: | G06F16/11 | 分类号: | G06F16/11;G06F16/21;G06F16/22;G06F16/23;G06F16/25;G06F16/35 |
代理公司: | 37236 青岛致嘉知识产权代理事务所(普通合伙) | 代理人: | 李浩成 |
地址: | 535011 广西壮族*** | 国省代码: | 广西;45 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明请求保护的基于云计算的海洋档案数据库并行化构建方法和装置,通过对海洋档案进行聚类划分,将所述海洋档案构建成多个数据库分区,将海洋档案分为静态性档案和动态性档案,采用SQL操作语言对这些数据进行查询和分析,导出并行化接口文件并解析;最终得到一个完整的底层多核并行优化数据库,该数据库作为海洋档案的数据库进行算法的工程化移植;该方法有效的解决了当前海洋档案管理混乱的问题,采用并行化数据库的手段,同时,对于海洋档案的管理采用动态数据和静态数据分离,准确动态分析和静态分析海洋档案数据相结合,此外,可视化展示海洋档案数据内容也是本发明的一大特点。 | ||
搜索关键词: | 海洋 档案 并行化 数据库 档案数据 档案数据库 多个数据库 方法和装置 动态分析 动态数据 多核并行 接口文件 静态分析 静态数据 档案管理 动态性 工程化 静态性 可视化 云计算 导出 构建 聚类 算法 解析 分区 移植 查询 混乱 优化 语言 展示 分析 管理 | ||
【主权项】:
1.一种基于云计算的海洋档案数据库并行化构建方法,其特征在于,包括:/n对海洋档案进行聚类划分,将所述海洋档案构建成多个数据库分区,将海洋档案分为静态性档案和动态性档案;/n基于HBase的虚拟过滤云数据库进行并行化接口设计,将聚类分区结果以数据块的格式通过本地读操作完成,当Reduce阶段结束的时候,所有的MapReduce作业结果会存储到分布式文件系统HDFS中,采用SQL操作语言对这些数据进行查询和分析,导出并行化接口文件;/n解析所述并行化接口文件,并行化接口文件的动作数据特征值经过Mapreduce 进行数据预处理之后存储,动作数据发生时间通过 Mapreduce 程序移交到数据库检查所述并行化接口文件是否符合规格,并且检查数字签名,检定真伪和完整性,如果符合系统会根据档案信息包模板生成 XML 格式的档案信息包行保存;/n从档案信息包提取保存静态信息中的目录信息,更新档案信息的案卷和卷内目录,采用远程过程调用协议服务,数据库视图中侦听消息,处理接收到的请求和可接收的响应消息;/n调用任务调度算法产生任务分配策略,并对保存有待加密 SQL 语句的并行化接口文件按照任务分配策略进行分割;/n釆用SN的体系结构以及实现模型为扩充模型,根据自测系统和各个数据分布方法的特点, Round-Robin法对数据对象进行分布并设计实现,优化策略对底层的每一个参与算法的信号处理函数库进行优化,最终得到一个完整的底层多核并行优化数据库,该数据库作为海洋档案的数据库进行算法的工程化移植;/n进行海洋档案数据库可视化管理和虚拟数据库建设,利用三维建模技术,将海洋档案数据库建模的结果嵌入到海洋档案数据库中,最终实现用户利用档案时即可进行智慧海洋档案数据库管理。/n
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北部湾大学,未经北部湾大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910976596.1/,转载请声明来源钻瓜专利网。