[发明专利]基于大数据的数据处理方法及装置

摘要

本发明提供了一种基于大数据的数据处理方法及装置，属于数据处理技术领域，能够以简单、有效的方式，充分利用操作系统的内存资源，从而实现高效的数据处理。该方法包括启动主控进程；主控进程接收请求数据处理的消息；在主控进程下的数据处理进程中进行数据处理。本发明可用于大数据环境下的高清视频的解码、转码等领域。

主权项

1.一种基于大数据的数据处理方法，其特征在于，包括：启动主控进程；主控进程接收请求数据处理的消息；在主控进程下的数据处理进程中进行数据处理，所述数据处理进程为32位解码进程；所述数据处理为视频解码，所述数据处理进程为解码进程；所述在主控进程下的数据处理进程中进行数据处理，具体为：在主控进程下创建解码进程，并在新创建的解码进程中进行视频解码；或者，在主控进程下已有的解码进程中进行视频解码；在所述主控进程接收请求数据处理的消息之后，还包括：判断已有的解码进程占用的内存是否会超出预设值，所述预设值为小于2G；如果会超出预设值，则在主控进程下创建解码进程，并在新创建的解码进程中进行视频解码；如果不会超出预设值，则在主控进程下已有的解码进程中进行视频解码。