[发明专利]一种流媒体日志的大量储存方法

说明书

本发明公开了一种流媒体日志的大量储存方法，一种流媒体日志的大量储存方法包括如下步骤：首先进行日志文件分割，再选择放置方法，再进行日志文件分块放置，再进行写入存储介质，然后建立索引，最后进行文件调用，本发明采用了对称文件分块放置策略，并且根据用于存储的流媒体服务器是否存在冗余数据来灵活选择对称复制因子对方法或对称因子对方法，相较于现有技术，本发明能提高系统的扩展能力和负载均衡能力，克服了访问倾向性对系统性能的负面影响；本发明根据各分片文件的大小对流媒体服务器的存储空间进行了预分配，相较于现有技术本发明能在一定程度上提高存储硬盘的使用寿命；本发明使用的是四级索引，可以更加快速且精准地进行定位。

技术领域

本发明涉及一种流媒体日志，具体为一种流媒体日志的大量储存方法，属于日志领域。

背景技术

日志在生活中是指记录你生活的点点滴滴，让它把你内心的世界表露出来，更好的诠释自己的内心世界的内容，而电脑的日志则是记录用户操作电脑时，电脑运作产生一个叫log的事件记录，每一行日志都记载着日期、时间、使用者及动作等相关操作的描述，而流媒体日志是指可以在网络上流传的日志，因为电脑的日志可以是有价值的信息宝库，也可以是毫无价值的数据泥潭，电脑的日志会随着时间的积累会产生大量的日志，所以需要一种流媒体日志的大量存储方法。

现有的流媒体日志存储方法中是直接自动存储至相应的服务器中，该方法容易导致日志文件存储乱，占用大量内存，而且不利于快速调用相应的日志文件，再加上文件内部访问倾向特性的存在，会导致整个系统性能的严重下降，而且现有的流媒体日志存储方法中没有进行存储空间的预分配，会影响流媒体服务器内部存储硬盘的读写效率以及使用寿命，另外，现有的流媒体日志存储方法中采用的是一级索引，在回看过程中的定位不够精准和快速。

发明内容

本发明的目的就在于为了解决上述问题而提供一种流媒体日志的大量储存方法，所述一种流媒体日志的大量储存方法包括如下步骤：

S1、日志文件分割，将需要存储的流媒体日志文件从首至尾均匀分为多个分片文件；

S2、选择放置方法，根据流媒体日志文件的访问倾向性选择对称分块放置方法，再判断用于存储的流媒体服务器是否存在冗余数据，若存在冗余数据则选择对称复制因子对方法，若不存在冗余数据则选择对称因子对方法；

S3、日志文件分块放置，根据选择好的放置方法以及流媒体服务器的数量将各个分片文件合理存储到流媒体服务器内部；

S4、写入存储介质，将各个分片文件数据并发写入流媒体服务器内部机械硬盘或者固态硬盘；

S5、建立索引，根据分片文件数据的相关信息分片文件数据的存储位置来建立相应的索引，最后分被发送至流媒体服务器和索引服务器进行存储；

S6、文件调用，通过相应的索引找到需要的流媒体日志文件，并进行调用，从而向操作者展示该流媒体日志文件的内容。

优选的，所述S1之前需要根据各分片文件的大小对流媒体服务器的存储空间进行预分配。

优选的，所述S2中的访问倾向性为人们更倾向于访问流媒体日志文件的首部。

优选的，所述S2中的对称因子对方法的负载均衡能力与文件数目的奇偶性正相关。

优选的，所述S2中的对称复制因子对方法的负载不均度始终为零。

优选的，所述S4中的写入方法采用大缓存机制。

优选的，所述S4中数据的写入采用了互斥锁的进程方法。