[发明专利]数据处理方法及装置

说明书

本申请提供数据处理方法及装置，其中所述数据处理方法包括：获取至少一个数据节点的目标数据；基于数据需求方的需求信息，确定针对所述目标数据的聚合策略，并基于所述聚合策略对所述目标数据进行第一次聚合；根据所述需求信息，确定聚合后的目标数据写入至预设存储组件的写入频率以及在所述预设存储组件中的存储时长；按照所述写入频率，将所述聚合后的目标数据写入预设存储组件，并将达到所述存储时长的目标数据从所述预设存储组件中删除。

技术领域

本申请涉及计算机技术领域，特别涉及一种数据处理方法。本申请同时涉及一种数据处理装置，一种计算设备，以及一种计算机可读存储介质。

背景技术

随着视频业务的发展，视频提供方为了提高对用户的视频观看体验，尽量减少用户在观看视频过程中出现的卡顿、花屏、掉线等情况，通常提前将直播的音视频数据推送到接近用户的CDN节点上，使得用户就近取得音视频数据，从而提升用户访问的速度和观看的稳定性，因此，需要及时获取CDN节点的状态数据，并对状态数据进行预处理，以便数据需求方可以基于处理后的状态数据确定CDN服务的稳定性，然而，由于CDN节点数量众多，采集数据的类型也众多，可能出现数据处理效率低下的问题。

发明内容

有鉴于此，本申请实施例提供了一种数据处理方法。本申请同时涉及一种数据处理装置，一种计算设备，以及一种计算机可读存储介质，以解决现有技术中存在的数据处理效率低下的缺陷。

根据本申请实施例的第一方面，提供了一种数据处理方法，包括：

获取至少一个数据节点的目标数据；

基于数据需求方的需求信息，确定针对所述目标数据的聚合策略，并基于所述聚合策略对所述目标数据进行聚合；

根据所述需求信息，确定聚合后的目标数据写入至预设存储组件的写入频率以及在所述预设存储组件中的存储时长；

按照所述写入频率，将所述聚合后的目标数据写入预设存储组件，并将达到所述存储时长的目标数据从所述预设存储组件中删除。

根据本申请实施例的第二方面，提供了一种数据处理装置，包括：

获取模块，被配置为获取至少一个数据节点的目标数据；

聚合模块，被配置为基于数据需求方的需求信息，确定针对所述目标数据的聚合策略，并基于所述聚合策略对所述目标数据进行聚合；

确定模块，被配置为根据所述需求信息，确定聚合后的目标数据写入至预设存储组件的写入频率以及在所述预设存储组件中的存储时长；

写入模块，被配置为按照所述写入频率，将所述聚合后的目标数据写入预设存储组件，并将达到所述存储时长的目标数据从所述预设存储组件中删除。

根据本申请实施例的第三方面，提供了一种计算设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机指令，所述处理器执行所述计算机指令时实现所述数据处理方法的步骤。

根据本申请实施例的第四方面，提供了一种计算机可读存储介质，其存储有计算机指令，所述计算机指令被处理器执行时实现所述数据处理方法的步骤。

本申请提供的数据处理方法，在获取至少一个数据节点的目标数据的基础上，基于数据需求方的需求信息，确定针对所述目标数据的聚合策略，并基于所述聚合策略对所述目标数据进行聚合，实现了基于数据需求方的需求信息对数据进行聚合，并通过聚合实现了对数据的结构化处理，在聚合之后，根据所述需求信息，确定聚合后的目标数据写入至预设存储组件的写入频率以及在所述预设存储组件中的存储时长，并按照所述写入频率，将所述聚合后的目标数据写入预设存储组件，并将达到所述存储时长的目标数据从所述预设存储组件中删除，实现了对基于数据需求方的需求，调节对数据的写入频率以及存储时长，并通过对结构化数据进行写入以及存储，提高了数据处理效率。

附图说明