[发明专利]海量AIS轨迹数据存储方法

说明书

本发明提供海量AIS轨迹数据存储方法。包括以下步骤：步骤一接收需要储存的海量AIS轨迹数据，并对AIS轨迹数据进行加密处理，得到加密数据；步骤二分析AIS轨迹数据的类型，并基于需要存储的AIS轨迹数据的类型，将AIS轨迹数据发送至混合硬盘的闪存区或磁性硬盘区存储，以实现对数据的优化存，并将加密数据发送给服务器。本发明提供的海量AIS轨迹数据存储方法通过自动监控与决策模块、数据储存规划模块与数据储存优化模块的配合提高船舶系统中数据智能存储优化方法，使用数据相关性多副本一致的哈希值存储优化方法，该方法可按照系统主属性相关性的数据在集群节点中聚集，进而加快数据存储优化速度。

技术领域

本发明涉及数据储存技术领域，尤其涉及海量AIS轨迹数据存储方法。

背景技术

船舶自动识别系统AIS可对船舶的运动状态进行实时监控，对船舶操纵人员来说，利用AIS数据可了解本船及其他目标船舶的航行动态信息，有利于船舶导航和避碰等行动；对海事交管部门来将，利用AIS数据信息可对船舶进行管理及控制；对事故调查人员来讲，利用AIS数据信息回顾船舶发生事故前的动态信息，并提取有效的特征信息，有利于事故的调查，目前，作为船舶避碰和自动交换信息的重要助航工具，越来越多的船舶配置了AIS设备，补充了雷达获取信息的不足，船舶通过该设备能够自动实时地与其他装有同类设备的船舶交换位置、航速和航向等动态信息，可有效避免船舶碰撞等海损事故的发生，通过AIS船舶也能向AIS基站发送船名、识别码、目的地、是否装载危险货物等静态信息，同时还能接收管理当局通过基站发送来的助航和告警等信息。

所以在海量AIS轨迹存在着大量的数据，导致数据在存储时的时间变长，导致存储的速度降低，同时由于AIS轨迹数据存在大量的数据，在对数据进行读取与检索时，也要耗费大量的时间，降低了查询数据的效率。

发明内容

本发明提供海量AIS轨迹数据存储方法，解决了在海量AIS轨迹存在着大量的数据，导致数据在存储时的时间变长，导致存储的速度降低，同时由于AIS轨迹数据存在大量的数据，在对数据进行读取与检索时，也要耗费大量的时间，降低了查询数据的效率的问题。

为解决上述技术问题，本发明提供的海量AIS轨迹数据存储方法，包括以下步骤：

步骤一，接收需要储存的海量AIS轨迹数据，并对AIS轨迹数据进行加密处理，得到加密数据；

步骤二，分析AIS轨迹数据的类型，并基于需要存储的AIS轨迹数据的类型，将AIS轨迹数据发送至混合硬盘的闪存区或磁性硬盘区存储，以实现对数据的优化存，并将加密数据发送给服务器；

步骤三，如果需要存储的AIS轨迹数据的类型为静态信息，则将该AIS轨迹数据发送至混合硬盘的磁性硬盘区存储；

步骤四，如果需要存储的AIS轨迹数据的类型为动态信息、影音文件等，则将所述数据发送至混合硬盘的闪存区存储；

步骤五，如果AIS轨迹数据所需的存储空间未超过混合硬盘的闪存区剩余的存储空间，则AIS轨迹数据存储至混合硬盘的闪存区。

优选的，所述步骤一内包括自动监控模块与决策模块，所述决策模块是用于船舶数据库中的判断。

优选的，所述步骤二包括数据储存规划模块，所述数据储存规划模块内的数据均匀分布在各个集群之中，保持负载均衡，出现故障节点数据为常态数据。

优选的，所述常态数据内包括关联数据，所述关联数据采用标准Hadoop布局方案，对数据进行连续操作需要在约定时间内完成，在此过程中，有大量无用数据被传输，如果该数据在上传保留了一部分设备属性，那么可将该设备上的全部数据都存储到相同节点的位置，利用自映射功能，实现存储的连续性操作行为，进而大大降低阶段数据通信时间，提高整体存储效率。

优选的，所述步骤三中的AIS数据静态信息是指舶系统固有的属性信息，所述步骤四中的AIS数据动态信息包含船舶的实时数据。