[发明专利]一种数据文件处理方法及系统

摘要

本发明公开了一种数据文件处理方法及系统，其中该方法包括:获取磁盘上的数据文件，其中数据文件以共享内存的数据结构进行存放；采用内存映射的方式将数据文件加载到共享内存中，并对共享内存进行初始化；基于该加载过程记录数据更新信息，数据更新信息包括数据文件的文件名以及第一时间信息，所述第一时间信息为加载过程加载时的时间；根据数据更新信息对数据文件进行读取处理。本发明实施例通过将磁盘上明文数据结构的数据文件以共享内存的数据结构进行存放，并将其加载到共享内存中，提高了加载效率；支持一处加载、多处使用，即通过共享内存，实现多个进程使用同一份共享内存数据，大大降低了额外的内存占用。

主权项

1.一种数据文件处理方法，其特征在于，包括：获取磁盘上的数据文件，其中所述数据文件以共享内存的数据结构进行存放；采用内存映射的方式将所述数据文件加载到所述共享内存中，并对所述共享内存进行初始化；基于该加载过程记录数据更新信息，所述数据更新信息包括数据文件的文件名以及第一时间信息，所述第一时间信息为所述加载过程加载时的时间；根据所述数据更新信息对数据文件进行读取处理；对磁盘上的数据文件进行更新检测；当确定出存在有需要更新的数据文件时，将所述需要更新的数据文件复制到更新目录下；将所述更新目录下的数据文件加载到共享内存中，并对所述共享内存进行初始化；将数据目录下的数据文件移动到备份目录；将所述更新目录下的数据文件移动到所述数据目录下，其中，所述更新目录、所述数据目录以及所述备份目录在同一文件系统中；删除数据文件更新前的数据文件映射；更新所述数据更新信息；按照预设时间间隔，对所述数据更新信息进行读取；若确定出数据更新信息中指示有目的数据文件的更新信息，则采用内存映射的方式将数据文件加载到所述共享内存中，并记录加载时的时间为第二时间信息。