[发明专利]一种数据写入控制方法及装置

说明书

技术领域

本发明涉及数据存储技术领域，特别是涉及一种数据写入控制方法及装置。

背景技术

随着互联网的发展，网络上的资源类型和数量也不断丰富，越来越多的的用户到网站获取自己感兴趣的信息。对于网站而言，需要记录用户浏览网站时的各种行为，而高频率的用户行为必然对系统的存储性能提出较高的要求。

以统计“页面访客数量”为例，对于网站的统计系统而言，用户的每一次浏览行为就代表着一次访问，需要对相应的“页面访客数量”数据进行更新，如果用户的浏览量较小，可以在每次数据更新时直接将更新数据写入数据库，但是，如果用户的浏览频率很高，那么需要频繁地向数据库写入数据，这种负荷是系统难以承受的。

为解决上述问题，现有技术采用的一种方案是：在每次数据更新时，将更新数据写入高速缓存，由于缓存采用的是易失性存储介质，一旦系统意外关机，缓存中未写入持久化存储介质的数据都会丢失，因此，还需要周期性地将缓存内的数据转存写入数据库。这种方式能够避免对数据库进行频繁的写入操作，而且可以有效利用高速缓存的速度优势，提高写入响应速度。但是在实际应用中，由于用户的访问量并不是维持不变的，因此对数据进行转存的周期设置难以把握，如果周期设置过短，对数据库压力的缓解程度有限；如果周期过长，则会增加丢失数据的风险，而且在此期间丢失的数据数量难以估算。

发明内容

为解决上述技术问题，本发明实施例提供一种数据写入控制方法及装置，技术方案如下：

本发明实施例提供一种数据写入控制方法，该方法包括：

接收到对目标数据更新请求后，将更新结果写入缓存；

监测所述目标数据上一次写入持久化存储介质后，在缓存中的写入次数；

如果写入次数达到预设的第一阈值，则将缓存中的目标数据更新结果写入持久化存储介质。

根据本发明的一种具体实施方式，该方法还包括：

在将更新结果写入缓存后，记录写入时刻；

监测所述目标数据上一次写入缓存后的经过时间；

如果经过时间达到预设的第二阈值，则将缓存中的目标数据更新结果写入持久化存储介质。

根据本发明的一种具体实施方式，该方法还包括：

在缓存中记录所述写入次数，并且在将缓存中的目标数据更新结果写入持久化存储介质后，将缓存中记录的写入次数初始化。

根据本发明的一种具体实施方式，所述监测所述目标数据上一次写入持久化存储介质后，在缓存中的写入次数，包括：

监测所述目标数据在缓存中的当前写入次数。

根据本发明的一种具体实施方式，所述第一阈值，根据系统对数据丢失量的允许范围设置：

第一阈值=最大允许丢失量+1。

根据本发明的一种具体实施方式，该方法还包括：

如果缓存中的数据丢失，根据所述第一阈值对丢失的数据量进行估计：

数据丢失量≤第一阈值-1。

本发明实施例还提供一种数据写入控制装置，该装置包括：

缓存单元，用于接收到对目标数据更新请求后，将更新结果写入缓存；

监测单元，用于监测所述目标数据上一次写入持久化存储介质后，在缓存中的写入次数；

持久化存储单元，用于在写入次数达到预设的第一阈值的情况下，将缓存中的目标数据更新结果写入持久化存储介质。

根据本发明的一种具体实施方式，

所述缓存单元，还用于在将更新结果写入缓存后，记录写入时刻；

所述监测单元，还用于监测所述目标数据上一次写入缓存后的经过时间；

持久化存储单元，还用于在经过时间达到预设的第二阈值的情况下，将缓存中的目标数据更新结果写入持久化存储介质。

根据本发明的一种具体实施方式，该装置还包括：

计数单元，用于在缓存中记录所述写入次数，并且在将缓存中的目标数据更新结果写入持久化存储介质后，将缓存中记录的写入次数初始化。

根据本发明的一种具体实施方式，所述监测单元，具体用于：

监测所述目标数据在缓存中的当前写入次数。

根据本发明的一种具体实施方式，所述第一阈值，根据系统对数据丢失量的允许范围设置：

第一阈值=最大允许丢失量+1。

根据本发明的一种具体实施方式，该装置还包括：

错误估计单元，用于在缓存中数据丢失的情况下，根据所述第一阈值对丢失的数据量进行估计：

数据丢失量≤第一阈值-1。