[发明专利]一种基于云计算的海事信息处理模型

说明书

本发明公开了一种基于云计算的海事信息处理模型，包括海事大数据采集层、海事大数据计算层、海事信息服务层；海事大数据采集层负责海事信息的采集和预处理，由船舶动态信息采集模块、通航环境信息采集模块、数据网关构成；海事大数据计算层主要负责海事业务的数据仓库建设及海事大数据的分布式处理，由Hbase数据仓库、数据云计算模块、Hive数据查询与分析模块构成；海事信息服务层负责海事业务相关决策生成，由相关信息分析模块、航行案例分析模块、海事大数据挖掘模块三部分构成。本发明能够全方位提高海事信息处理能力，更快地为海事用户提供服务。

技术领域

本发明涉及信息处理模型，更具体的说，是涉及一种基于云计算的海事信息处理模型。

背景技术

随着社会不断进步，信息化建设已逐渐普及到各个领域中。海事系统已在发展过程中形成多个子系统，并积累了大量数据信息。但是，我国地域广阔，海事数据资源分别部署在海事局及各地方海事机构中，呈现出分散的特点，形成“数据孤岛”，共享度低。此外，海事数据在不断积累中呈现出大数据的特征，现有的数据管理系统已无法满足基本的数据处理需求，因此很难为用户提供一致、可靠和及时的信息。云计算技术具有弹性存储和高效计算的特点，近年来已在多个领域中得到应用及发展。目前已初步提出海事云的概念，相比云计算在其他领域中的应用探究，海事云方面的分析尚处于起步阶段。本专利拟通过对海事数据与云计算相结合搭建有效的海事云计算模型，全方位提高海事信息处理能力，更快地为海事用户提供服务。

发明内容

本发明的目的是为了克服现有技术中的不足，主要针对现有的数据管理系统已无法满足基本的数据处理需求，很难为用户提供一致、可靠和及时的信息的情况，提出一种基于云计算的海事信息处理模型，能够全方位提高海事信息处理能力，更快地为海事用户提供服务。

本发明的目的是通过以下技术方案实现的。

本发明的基于云计算的海事信息处理模型，包括海事大数据采集层、海事大数据计算层、海事信息服务层三个部分，三个部分互相配合完成海事大数据的处理和信息挖掘；

所述海事大数据采集层负责海事信息的采集和预处理，由船舶动态信息采集模块、通航环境信息采集模块、数据网关三部分构成；其中，所述船舶动态信息采集模块和通航环境信息采集模块收集到的信息遵循数管理规则，由数据网关进行异构数据的转换和集成，并经过数据分流之后输送到海事大数据计算层中；

所述海事大数据计算层主要负责海事业务的数据仓库建设及海事大数据的分布式处理，由Hbase数据仓库、数据云计算模块、Hive数据查询与分析模块构成；其中，所述Hbase数据仓库实现HDFS分布式文件物理数据的存储，所述数据云计算模块包含MapReduce批量处理计算模式和Spark流计算模式，所述Hive数据查询与分析模块通过SQL接口实现数据查询和分析功能，并为Hbase数据仓库的各种存储表建立索引关系；

所述海事信息服务层负责海事业务相关决策生成，由相关信息分析模块、航行案例分析模块、海事大数据挖掘模块三部分构成；其中，所述相关信息分析模块用于得出海事信息的特征，所述航行案例分析模块用于生成候选案例，所述海事大数据挖掘模块用于分析出传播的行为模式，以此为基础，生成对应的业务来服务海事用户。

所述MapReduce批量处理计算模式实现海量数据的离线处理，所述Spark流计算模式实现在线数据实时处理。

所述海事大数据计算层基于Hadoop开源云计算平台，以HDFS为基础，实现海事数据仓库的分布式文件系统，基于该系统，通过Hbase实现物理数据的存储。

与现有技术相比，本发明的技术方案所带来的有益效果是：

本发明中海事大数据采集层负责海事信息的采集和预处理，海事大数据计算层主要负责海事业务的数据仓库建设及海事大数据的分布式处理，海事信息服务层负责海事业务相关决策生成。