[发明专利]一种车辆物联网云存储系统数据分组方法有效
申请号: | 202010507955.1 | 申请日: | 2020-06-05 |
公开(公告)号: | CN112083877B | 公开(公告)日: | 2023-05-09 |
发明(设计)人: | 朱东杰;杜海文;王大方;杨博文;刘学;胡浩 | 申请(专利权)人: | 哈尔滨工业大学(威海);苏州玄盾汽车科技有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 威海聚睿知识产权代理事务所(普通合伙) 37352 | 代理人: | 宋立国 |
地址: | 264200*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 车辆 联网 存储系统 数据 分组 方法 | ||
1.一种车辆物联网云存储系统数据分组方法,其特征在于包括如下步骤:
步骤一,收集车辆物联网云存储系统的数据访问日志,得到数据历史访问序列;
步骤二,在车辆物联网云存储系统中建立FIFO缓存;
步骤三,按照数据历史访问序列顺序,将数据加入FIFO缓存,当FIFO缓存中替出数据总量不小于FIFO缓存空间时,将FIFO缓存中所有数据的块地址集合记为一次缓存事务,将替出数据总量重置为0,直到数据历史访问序列中的数据全部通过FIFO缓存,为缓存事务依次记序号;
步骤四,分别查找数据访问日志中每个数据的块地址出现过的缓存事务,为每个数据构造数据访问特征的向量;
步骤五,计算全部数据间的数据访问特征的向量距离,如果两个数据间的数据访问特征的向量距离小于两个数据访问特征的向量的模的平均值的10%,将它们合并成一个初步分组;
步骤六,计算初步分组间访问关联关系强度,建立并初始化数据访问关系图;初始化的数据访问关系图为以初步分组为点的图;
步骤七,以初步分组间访问关联关系为边,将边依次加入初始化的数据访问关系图中;如果将边依次加入初始化的数据访问关系图的过程中出现完全子图,立即将完全子图中的全部点合并成新的点,直到所有边全部加入初始化的数据访问关系图;
所述的FIFO缓存空间大小为存储节点运行时缓存空间大小的10%-100%;
步骤四中所述的分别查找数据访问日志中每个数据的块地址出现过的缓存事务的方法为:为缓存事务中的每个数据块地址建立倒排索引;获得每个数据块地址所在的缓存事务序号集合;所述为每个数据构造数据访问特征的向量的方法为:构造一个维数为缓存事务总数量的列向量,列向量的维度与缓存事务一一对应,列向量的维度的顺序与缓存事务序号顺序相同,出现该数据的块地址的缓存事务所对应的列向量的维度的值设为1,列向量的其他维度的值记为0;
步骤五中所述的向量的模的计算方式为:向量中每个向量值的平方值相加后的正平方根值;
步骤六中所述的初步分组间访问关联关系强度的计算方法为:分别找到每一个缓存事务中每一个数据的块地址所在的初步分组,得到该缓存事务对应的初步分组集合,将集合中的初步分组两两建立一次访问关联关系;统计得到的初步分组间建立访问关联关系的总数量为初步分组间访问关联关系强度;
步骤七中所述的将边依次加入初始化的数据访问关系图中的顺序为,按照初步分组间访问关联关系总数量从高到低的顺序。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于哈尔滨工业大学(威海);苏州玄盾汽车科技有限公司,未经哈尔滨工业大学(威海);苏州玄盾汽车科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010507955.1/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置