[发明专利]一种数据写入方法、装置及计算机设备

说明书

本发明公开了一种数据写入方法、装置及计算机设备，该数据写入方法包括：当接收到待写入数据，根据所述待写入数据发起写入请求，所述写入请求包括所述待写入数据；根据所述写入请求将所述待写入数据写入到缓存器中；确定在达到预设间隔时长时所述缓存器中暂存数据的数量；当所述缓存器中暂存数据的数量大于或等于预设阈值时，将所述待写入数据写入HBase。本发明通过在达到预设间隔时长时检测缓存器中的暂存数据的数量，以尽可能及时地将待写入数据写入到HBase，同时判断缓存器中暂存数据的数量是否大于或等于预设阈值，避免了数据量小时将数据写入到HBase浪费资源的问题。

技术领域

本发明涉及视频存储技术领域，具体涉及一种数据写入方法、装置及计算机设备。

背景技术

视频监控技术应用在社会生产、生活的各个方面，视频数据的挖掘分析对后续工作有重大的指导意义，因此，需有效的存储技术来对视频监控数据进行存储以便于对挖掘分析提供支撑。HBase是一种构建在HDFS之上的分布式、面向列的存储系统，可有效存储视频数据。但是，客户端只有在缓存器存满之后才会将其送往服务器进行存储。当缓存器长时间处于未存满状态时，数据会一直暂存在缓存器中，不能及时被送往服务器进行存储。

发明内容

因此，本发明要解决的技术问题在于克服现有技术中缓存器不满时无法及时送到服务器进行存储的缺陷，从而提供一种数据写入方法、装置及计算机设备。

根据第一方面，本发明实施例公开了一种数据写入方法，包括如下步骤：当接收到待写入数据，根据所述待写入数据发起写入请求，所述写入请求包括所述待写入数据；根据所述写入请求将所述待写入数据写入到缓存器中；确定在达到预设间隔时长时所述缓存器中暂存数据的数量；当所述缓存器中暂存数据的数量大于或等于预设阈值时，将所述待写入数据写入HBase。

可选地，所述缓存器包括第一子缓存器和第二子缓存器，所述第二子缓存器存储容量大于所述第一子缓存器，所述根据所述写入请求将所述待写入数据写入到缓存器中包括：判断所述待写入数据的大小是否超过预设范围；当所述待写入数据的大小在预设范围内时，根据所述写入请求将所述待写入数据写入到所述第一子缓存器中；当所述待写入数据的大小超过所述预设范围时，根据所述写入请求将所述待写入数据写入到所述第二子缓存器中。

可选地，所述方法还包括：确定在达到第一预设间隔时长时所述第一子缓存器中暂存数据的数量；当所述第一子缓存器中暂存数据的数量大于或等于第一预设阈值时，将所述待写入数据写入HBase。

可选地，所述方法还包括：确定在达到第二预设间隔时长时所述第二子缓存器中暂存数据的数量；当所述第二子缓存器中暂存数据的数量大于或等于第二预设阈值时，将所述待写入数据写入HBase，所述第二预设阈值大于所述第一预设阈值。

可选地，所述方法还包括：当所述缓存器中暂存数据的数量小于所述预设阈值时，实时监测所述缓存器中暂存数据的数量，直到所述暂存数据的数量大于或等于预设阈值，将所述待写入数据写入HBase。

可选地，所述方法还包括：当所述缓存器中暂存数据的数量小于所述预设阈值时，实时监测所述缓存器中暂存数据的数量；当达到第三预设间隔时长且所述暂存数据的数量小于所述预设阈值，将所述待写入数据写入HBase。

可选地，在所述当接收到待写入数据，根据所述待写入数据发起写入请求之前，还包括：向协调服务器发送第一访问请求，所述第一访问请求用于访问meta表的位置信息；接收所述协调服务器发送的所述meta表的位置信息；根据所述meta表的位置信息向HBase服务器发送第二访问请求，所述第二访问请求用于读取meta表的元数据信息；根据所述元数据信息确定所述待写入数据对应的存储位置信息。