[发明专利]热点数据的识别方法、装置、设备及存储介质有效
申请号: | 201810876448.8 | 申请日: | 2018-08-03 |
公开(公告)号: | CN110795026B | 公开(公告)日: | 2021-04-27 |
发明(设计)人: | 丁光凯;王伟;林起芊;汪渭春 | 申请(专利权)人: | 杭州海康威视系统技术有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 北京三高永信知识产权代理有限责任公司 11138 | 代理人: | 韩东艳 |
地址: | 310051 浙江省杭州*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 热点 数据 识别 方法 装置 设备 存储 介质 | ||
本发明提供了一种热点数据的识别方法、装置、设备及存储介质,属于存储技术领域。本发明考虑到云存储系统的流式存储方式,提供了能够适用于云存储系统的热点数据识别方法,通过结合云存储系统当前的存储周期,来确定热点数据的统计周期,将统计周期划分为一个个时间分片,根据每个数据采集设备在每个时间分片的访问行为次数,来确定云存储系统在当前的统计周期的热点数据,令识别热点数据的过程也具有时间属性,成为一个动态的过程,由于热点数据的统计周期属于云存储系统的存储周期,可以保证统计范围的所有数据均是云存储系统当前正在存储的数据,而不包含已被删除或已被覆盖写的老数据,极大地提高了云存储系统中识别热点数据的准确性。
技术领域
本发明涉及存储技术领域,特别涉及一种热点数据的识别方法、装置、设备及存储介质。
背景技术
热点数据是指存储系统中被频繁访问的数据,对于存储系统来说,如何从存储系统存储的大量数据中识别出热点数据,对于存储系统来说有着重要的影响。
在存储系统运行中,每当用户对任一存储空间的数据触发访问行为时,存储系统可以记录当前时间点,作为该存储空间的访问时间点,在识别热点数据的过程中,对于每个存储空间,可以根据该存储空间对应的访问时间点,确定该存储空间最近几次被访问的时间间隔,当该时间间隔小于时间间隔阈值时,会将该存储空间存储的数据,作为存储系统的热点数据。
上述方案仅适用于采用静态存储方式的存储系统来识别热点数据,而对于采用流式存储方式的云存储系统来说,云存储系统每经过当前的存储周期,就会在存储节点中已经存储的数据的基础上,覆盖写入新数据,由于每个存储节点存储的数据会随着时间的推移而动态刷新,导致云存储系统无法应用上述方案识别热点数据。
发明内容
本发明实施例提供了一种热点数据的识别方法、装置、设备及存储介质,能够解决相关技术中无法在云存储系统中识别热点数据的问题。所述技术方案如下:
一方面,提供了一种热点数据的识别方法,所述方法包括:
根据云存储系统当前的存储周期,确定热点数据的统计周期,所述统计周期属于所述存储周期;
将所述统计周期划分为至少一个时间分片;
根据至少一条用户行为记录,获取至少一个数据采集设备在所述至少一个时间分片的访问行为次数,所述至少一个数据采集设备采集的数据存储于所述云存储系统中,每条用户行为记录用于记录用户对任一数据采集设备在任一时间段的数据的一次访问行为;
当任一数据采集设备在任一时间分片的访问行为次数满足预设条件时,将所述数据采集设备的所述时间分片的数据,作为所述云存储系统在所述统计周期的热点数据。
可选地,所述根据云存储系统当前的存储周期,确定热点数据的统计周期,包括:
根据当前时间点以及所述存储周期的时长,确定所述统计周期,所述统计周期包含所述当前时间点,且所述统计周期的时长小于或等于所述存储周期的时长。
可选地,所述根据至少一条用户行为记录,获取至少一个数据采集设备在所述至少一个时间分片的访问行为次数,包括:
对于任一条用户行为记录,确定所述用户行为记录对应的数据采集设备以及时间段;
当所述时间段属于一个时间分片时,对所述数据采集设备在所述时间分片的访问行为次数递增;或,当所述时间段跨越多个时间分片时,对所述数据采集设备在所述多个时间分片的访问行为次数均递增。
可选地,所述根据至少一条用户行为记录,获取至少一个数据采集设备在所述至少一个时间分片的访问行为次数,包括:
根据所述至少一条用户行为记录以及至少一种行为类型,获取至少一个数据采集设备在所述至少一个时间分片的至少一种行为类型对应的访问行为次数;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州海康威视系统技术有限公司,未经杭州海康威视系统技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810876448.8/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置