[发明专利]内容数据存储方法、装置、服务器及存储介质

说明书

本公开关于一种内容数据存储方法、装置、服务器及存储介质，涉及存储技术领域，可以提高读取业务的响应速度的效果。本公开的实施例包括：按照预设时间间隔检测分布式发布订阅消息系统中存储的内容数据的存储时长；从所述分布式发布订阅消息系统存储的内容数据中，确定存储时长大于或等于预设时长的第一目标内容数据；获取所述第一目标内容数据在所述分布式发布订阅消息系统中的第一存储位置信息；基于所述第一存储位置信息将所述第一目标内容数据存储至分布式文件系统中，其中，所述第一目标内容数据在所述分布式文件系统中的存储位置基于所述第一存储位置信息确定。

技术领域

本公开涉及存储技术领域，尤其涉及内容数据存储方法、装置、服务器及存储介质。

背景技术

分布式发布订阅消息系统，它可以处理消费者在网站中的所有动作流数据，例如：采用Kafka这一分布式发布订阅消息系统处理消费者在网站中的所有动作流数据。另外，分布式发布订阅消息系统通过Hadoop的并行加载机制来统一线上和离线的消息处理，并可以通过集群来提供实时的消息。

相关技术中，主题内容的数据大部分存储在分布式发布订阅消息系统中的磁盘上，当消费者(Consumer)客户端读取某个主题(topic)的历史数据时，会大量读取存储该主题内容的磁盘上的数据，而其他的磁盘则会较为空闲，可见，相关技术中的内容数据存储方法会导致读取业务的响应速度较慢。

发明内容

本公开提供一种内容数据存储方法、装置、服务器及存储介质，以至少解决相关技术中读取业务的响应速度较慢的问题。本公开的技术方案如下：

根据本公开实施例的第一方面，提供一种内容数据存储方法，所述内容数据存储方法包括：

确定分布式发布订阅消息系统中存储时长大于或等于预设时长的第一目标内容数据；

将所述第一目标内容数据存储至分布式文件系统。

根据本公开实施例的第二方面，提供一种内容数据存储装置，所述内容数据存储装置包括：

检测模块，被配置为执行按照预设时间间隔检测分布式发布订阅消息系统中存储的内容数据的存储时长

第一确定模块，被配置为执行从所述分布式发布订阅消息系统存储的内容数据中，确定存储时长大于或等于预设时长的第一目标内容数据；

获取模块，被配置为执行获取所述第一目标内容数据在所述分布式发布订阅消息系统中的第一存储位置信息；

第一存储模块，被配置为执行基于所述第一存储位置信息将所述第一目标内容数据存储至分布式文件系统中，其中，所述第一目标内容数据在所述分布式文件系统中的存储位置基于所述第一存储位置信息确定。

根据本公开实施例的第三方面，提供一种服务器，所述服务器包括：

处理器；

用于存储所述处理器可执行指令的存储器；

其中，所述处理器被配置为执行所述指令，以实现如第一方面所述的内容数据存储方法。

根据本公开实施例的第四方面，提供一种存储介质，当所述存储介质中的指令由服务器的处理器执行时，使得服务器能够执行如第一方面所述的内容数据存储方法。

根据本公开实施例的第五方面，提供一种计算机程序产品，当所述计算机程序产品的指令由服务器的处理器执行时，使得服务器能够执行如第一方面所述的内容数据存储方法。

本公开的实施例提供的技术方案至少带来以下有益效果：由于本公开实施例中将分布式发布订阅消息系统中存储时长大于或等于预设时长的第一目标内容数据存储至分布式文件系统中，因此，当Consumer客户端读取某个topic的历史数据时，可以从分布式文件系统中读取，而分布式文件系统能够充分利用磁盘的容量，从而可以提高读取业务的响应速度。