[发明专利]一种视频流数据的存储方法及装置

说明书

本申请公开了一种视频流数据的存储方法及装置，获取待存储视频流数据，并将所述待存储视频流数据缓存为多个预设容量的视频数据文件后，根据预设调度策略确定所述待存储视频流数据在存储系统中多个存储层级中的目标存储层级；按视频数据文件的时间顺序将所述待存储视频流数据存储在所述目标存储层级的第一个可用定制分区的第一个可用块文件对应的多个连续可用数据片中。实现了视频流数据的分层、分块文件以及分片持续存储，避免了视频流数据的离散化存储，提高了磁盘I/O吞吐率和存储系统的并发写入性能。

技术领域

本发明涉及数据存储技术领域，更具体的，涉及一种视频流数据的存储方法及装置。

背景技术

在超大规模的智慧城市，尤其是智慧交通的应用，多达上万路高清摄像头接入，其存储管理能力很难满足。例如720P、1080P等高分辨率前端网络视频同时上万路接入，以一路1080P、30帧/秒的视频流为例，其产生的视频数据码率为750Mb/s，即使采用目前比较高压缩比的H.264视频压缩编码算法进行编码后，其所产生的视频数据码率也在4～8Mb/s。随着接入的视频数据路数不断增加，NVR等存储系统中磁盘聚合I/O吞吐量急剧下降，仅仅依靠存储服务器上的操作系统的并发写入机制，无法很大程度改善。

采用HDFS的大规模视频监控系统中的视频存储和管理，可以在监控视频文件较大尺寸的情况下提供比较好的聚合数据带宽。但HDFS不是专门为视频数据存储设计的分布式文件系统，其本身仍需要支持一些通用的文件系统特性，适合的应用场景仍是一次写入数据多次读取，这和视频监控应用需要的持续写入并附带很少的读取的场景不匹配。

目前已有的基于云存储方案的视频监控存储系统最大的问题就是其底层的分布式文件系统不是面向监控视频流存储而优化实现的。其系统底层文件系统磁盘分区对持续写入、单位数据量大的不能提供很高的磁盘写入性能。

因此，现有的视频数据存储技术不能满足智慧城市中海量视频流数据的存储需求。

发明内容

有鉴于此，本发明提供了一种视频流数据的存储方法及装置，满足智慧城市中海量视频流数据的存储需求。

为了实现上述发明目的，本发明提供的具体技术方案如下：

一种视频流数据的存储方法，包括：

获取待存储视频流数据，并将所述待存储视频流数据缓存为多个预设容量的视频数据文件；

根据预设调度策略确定所述待存储视频流数据在存储系统中多个存储层级中的目标存储层级；

按视频数据文件的时间顺序将所述待存储视频流数据的多个视频数据文件分别存储在所述目标存储层级的第一个可用定制分区的第一个可用块文件对应的多个连续可用数据片中。

优选的，所述将所述待存储视频流数据缓存为多个预设容量的视频数据文件，包括：

对所述待存储视频流数据进行缓存；基于视频感知编码技术对所述待存储视频流数据进行编码压缩，得到压缩后的待存储视频数据；

按压缩后的待存储视频数据中每一帧视频数据的时间顺序，将压缩后的待存储视频数据分解为多个预设容量的视频数据文件。

优选的，所述根据预设调度策略确定所述待存储视频流数据在存储系统中多个存储层级中的目标存储层级，包括：

调用视频流数据类型与存储系统中存储层级映射关系表，根据所述待存储视频流数据的类型确定所述待存储视频流数据的目标存储层级。

优选的，每个存储层级对应特定类型的存储介质，不同存储层级对应的存储介质的类型不同。

优选的，所述方法还包括：

生成块文件配置文件，所述块文件配置文件中记录了块文件的容量，使每个块文件只能存储一个视频流数据；