[发明专利]分割文件的方法和装置

说明书

本发明公开了分割文件的方法和装置，涉及计算机技术领域。该方法的一具体实施方式包括：获取连接请求，对所述连接请求中携带的数据包进行解析；基于所述解析结果，根据所述数据包中的分割规则对目标文件进行分割。该实施方式能够简化开发流程，规范分割标准，避免了每个系统都根据各自的规则来分割文件所导致的工作重复的问题技术效果。

技术领域

本发明涉及计算机技术领域，尤其涉及一种分割文件的方法和装置。

背景技术

随着计算机技术的发展，现在的社会是一个高速发展的社会，科技发达，信息流通，人们之间的交流越来越密切，生活也越来越方便，大数据就是这个高科技时代的产物，例如电商平台，随着单量的逐年递增，商品的日志信息不断加大，为了进行大数据分析，需要对文件进行解析，但是，读取过大的文件导致占用的内存过大，容易系统崩溃。

现有技术通常采用对文件先分割再读取的方式调用数据文件，目前，各个系统在进行文件分割时，都按照各自的规则进行解析。

在实现本发明过程中，发明人发现现有技术中至少存在如下问题：

由于缺少一个统一的协议来规范文件的切割，各个系统都在重复着类似的事情，却无法将功能进行重复使用。

发明内容

有鉴于此，本发明实施例提供一种分割文件的，能够简化开发流程，规范分割标准，避免了每个系统都根据各自的规则来分割文件所导致的工作重复的问题技术效果。

为实现上述目的，根据本发明实施例的一个方面，提供了一种分割文件的方法。

本发明实施例的一种分割文件的方法包括：获取连接请求，对所述连接请求中携带的数据包进行解析；基于所述解析结果，根据所述数据包中的分割规则对目标文件进行分割。

可选地，所述数据包还包括源地址、目的地址、认证/注册需求、返回类型，其中，所述返回类型还包括协议、地址、参数、文件组；所述分割规则还包括文件数、规则表达式、文件名格式。

可选地，根据所述数据包中的分割规则对目标文件进行分割之前包括：判断所述目的地址是否已注册；若是，则对所述目的地址进行认证；若否，则对所述目的地址进行注册及认证。

可选地，对所述目的地址进行认证包括：查询目的地址白名单是否存在所述目的地址；若是，则通过认证；若否，则终止所述连接请求。

可选地，根据所述数据包中的分割规则对目标文件进行分割还包括：更新所述目标文件的分割进程，并断开连接；分割后的所述目标文件根据所述文件名格式进行命名，并存储于所述地址。

可选地，根据所述数据包中的分割规则对目标文件进行分割之前还包括：根据所述源地址判断所述连接请求是否合法；若合法，则建立连接；否则，不建立连接。

为实现上述目的，根据本发明实施例的另一方面，提供了一种分割文件的装置。

本发明实施例的一种分割文件的装置包括：解析模块，用于获取连接请求，对所述连接请求中携带的数据包进行解析；分割模块，用于基于所述解析结果，根据所述数据包中的分割规则对目标文件进行分割。

可选地，所述数据包还包括源地址、目的地址、认证/注册需求、返回类型，其中，所述返回类型还包括协议、地址、参数、文件组；所述分割规则还包括文件数、规则表达式、文件名格式。

可选地，所述装置还包括：第一判断模块，用于判断所述目的地址是否已注册；若是，则对所述目的地址进行认证；若否，则对所述目的地址进行注册及认证。

可选地，所述第一判断模块还用于：查询目的地址白名单是否存在所述目的地址；若是，则通过认证；若否，则终止所述连接请求。