[发明专利]一种基于纠删池的编解码方法、装置、设备及存储介质

说明书

本申请公开了一种基于纠删池的编解码方法、装置、设备及计算机可读存储介质，方法包括：当接收到需要进行数据编解码的原始数据时，将原始数据存储至共享内存中；向编解码进程发送编解码信号，以便编解码进程在接收到编解码信号后从共享内存中获取原始数据，并调用硬编解码插件进行硬编解码操作；若硬编解码操作失败，则控制编解码进程调用软编解码插件进行软编解码操作；在编解码进程完成编解码操作后，从共享内存中获取编解码结果。本方法是利用两个线程实现对原始数据进行编解码操作，当硬编解码操作失败时，纠删池中的进程可以继续调用编解码进程以实现软编解码操作，能够提高编解码操作的可靠性，从而提高分布式系统的稳定性和可靠性。

技术领域

本发明涉及数据处理领域，特别涉及一种基于纠删池的编解码方法、装置、设备及计算机可读存储介质。

背景技术

分布式系统通常采用纠删码(erasure coding，EC)来实现数据的冗余，如果因磁盘故障等问题导致数据的丢失，可以通过纠删码实现数据的恢复。分布式系统根据不同的开源代码实现了不同的纠删编解码插件，分布式系统通过加载纠删编解码插件来调用对应的编解码函数，进而实现编解码操作。随着加速芯片的出现，在分布式系统的架构上扩展了芯片加速插件，芯片加速插件可以直接调用加速芯片的驱动API(ApplicationProgramming Interface，应用编程接口)来实现编解码功能。但直接调用加速芯片的驱动API进行数据的编解码操作时，分布式系统的稳定性和可靠性会严重依赖加速芯片。如果加速芯片出现故障或者热插拔等情况，这将导致编解码操作失败甚至导致分布式系统的崩溃，给分布式系统的稳定性和可靠性造成致命的影响。也就是说，目前的技术方案都是直接利用一个操作进程调用对应的插件进行编解码操作，而当某些因素导致该操作进程无法运行时，将直接导致编解码操作失败甚至导致分布式系统崩溃，严重影响分布式系统的稳定性和可靠性。

因此，如何提高编解码操作的可靠性，从而提高分布式系统的稳定性和可靠性，是本领域技术人员目前需要解决的技术问题。

发明内容

有鉴于此，本发明的目的在于提供一种基于纠删池的编解码方法，能够提高编解码操作的可靠性，从而提高分布式系统的稳定性和可靠性；本发明的另一目的是提供一种基于纠删池的编解码装置、设备及计算机可读存储介质，均具有上述有益效果。

为解决上述技术问题，本发明提供一种基于纠删池的编解码方法，包括：

当接收到需要进行数据编解码的原始数据时，将所述原始数据存储至共享内存中；

向编解码进程发送编解码信号，以便所述编解码进程在接收到所述编解码信号后从所述共享内存中获取所述原始数据，并调用硬编解码插件进行硬编解码操作；

若所述硬编解码操作失败，则控制所述编解码进程调用软编解码插件进行软编解码操作；

在所述编解码进程完成编解码操作后，从所述共享内存中获取编解码结果。

优选地，所述编解码进程在接收到所述编解码信号后从所述共享内存中获取所述原始数据，并调用硬编解码插件进行硬编解码操作的过程，具体包括：

所述编解码进程在接收到所述编解码信号后，从所述共享内存中获取所述原始数据；

所述编解码进程通过调用硬编解码插件接口来调用加速芯片的驱动API，利用所述加速芯片调用对应的编解码函数进行所述硬编解码操作。

优选地，所述若所述硬编解码操作失败，则控制所述编解码进程调用软编解码插件进行软编解码操作的过程，具体包括：

若所述硬编解码操作失败，则控制所述编解码进程通过调用CPU命令的方式调用对应的编解码函数进行所述软编解码操作。

优选地，进一步包括：

接收所述编解码进程在编解码操作的过程中的健康状态。