[发明专利]文件处理方法、装置、电子设备、介质和计算机程序在审
申请号: | 202110916215.8 | 申请日: | 2021-08-10 |
公开(公告)号: | CN113641633A | 公开(公告)日: | 2021-11-12 |
发明(设计)人: | 杜毓青 | 申请(专利权)人: | 中国工商银行股份有限公司 |
主分类号: | G06F16/14 | 分类号: | G06F16/14;G06F16/182;G06F16/23;G06F9/455;H04L29/08 |
代理公司: | 中科专利商标代理有限责任公司 11021 | 代理人: | 赵婷 |
地址: | 100140 北*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 文件 处理 方法 装置 电子设备 介质 计算机 程序 | ||
1.一种基于分布式环境的文件处理方法,其特征在于,包括:
获取数据文件;
根据所述数据文件生成校验文件,其中,所述校验文件记录有第一校验信息和第二校验信息,所述第一校验信息为所述校验文件的文件信息,所述第二校验信息为所述数据文件的文件信息;
检测所述校验文件的编码码制;
检测所述第一校验信息的第一字段结构;
检测所述第二校验信息的第二字段结构;
当所述编码码制、第一字段结构和第二字段结构均正确时,对所述数据文件进行拆分,将拆分后的所述数据文件分别导入批量服务器下的对应的目录中;以及
将所述批量服务器下对应的目录中的所述数据文件的内容写入对应的数据库。
2.根据权利要求1所述的方法,其特征在于,所述获取数据文件包括:从应用中获取该应用生成的至少一个所述数据文件。
3.根据权利要求2所述的方法,其特征在于,所述根据所述数据文件生成校验文件包括:根据至少一个所述数据文件生成校验文件,其中,所述校验文件记录的所述第二校验信息与所述数据文件一一对应。
4.根据权利要求3所述的方法,其特征在于,所述第一校验信息在所述校验文件中为一条记录信息,每个所述第二校验信息在所述校验文件中为一条记录信息,每条所述记录信息的结束为一个回车换行符。
5.根据权利要求2所述的方法,其特征在于,所述第一字段结构包括:应用标识字段、应用名称字段、传输日期字段、传输场次字段、从所述应用中获取的所述数据文件的个数字段和第一备用字段中的至少一个。
6.根据权利要求2所述的方法,其特征在于,所述第二字段结构包括:所述数据文件的文件名称字段、包含的子文件个数字段、文件大小字段、创建时间字段、文件状态字段和第二备用字段中的至少一个。
7.根据权利要求1所述的方法,其特征在于,所述数据文件包括m个子文件,m大于等于1,所述对所述数据文件进行拆分,将拆分后的所述数据文件分别导入批量服务器下的对应的目录中包括:
将每个所述子文件的文件格式拆分成多个字段信息;
选择每个所述子文件下的多个字段信息中的一个输入哈希函数,得到m个输出值;
将m个输出值分别与批量服务器下的目录对应;以及
将每个所述子文件导入与该子文件的输出值对应的所述目录中。
8.根据权利要求7所述的方法,其特征在于,每个所述子文件的文件格式为定长格式,所述将每个所述子文件的文件格式拆分成多个字段信息包括:根据所述文件格式的固定位置进行拆分。
9.根据权利要求7所述的方法,其特征在于,每个所述子文件的文件格式为非定长格式,所述将每个所述子文件的文件格式拆分成多个字段信息包括:根据所述文件格式中的分隔符进行拆分。
10.一种基于分布式环境的文件处理装置,其特征在于,包括:
获取模块,所述获取模块用于获取数据文件;
生成模块,所述生成模块用于根据所述数据文件生成校验文件,其中,所述校验文件记录有第一校验信息和第二校验信息,所述第一校验信息为所述校验文件的文件信息,所述第二校验信息为所述数据文件的文件信息;
第一检测模块,所述第一检测模块用于检测所述校验文件的编码码制;
第二检测模块,所述第二检测模块用于检测所述第一校验信息的第一字段结构;
第三检测模块,所述第三检测模块用于检测所述第二校验信息的第二字段结构;
拆分模块,当所述编码码制、第一字段结构和第二字段结构均正确时,所述拆分模块用于对所述数据文件进行拆分,将拆分后的所述数据文件分别导入批量服务器下的对应的目录中;以及
导入模块,所述导入模块用于将所述批量服务器下的对应的目录中的所述数据文件的内容写入对应的数据库。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国工商银行股份有限公司,未经中国工商银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110916215.8/1.html,转载请声明来源钻瓜专利网。