[发明专利]一种基于并发传输模式的大文件上传方法

说明书

技术领域

本发明涉及计算机应用技术领域技术，尤其涉及一种基于并发传输模式的大文件上传方法。 

背景技术

文件的上传功能在基于B/S的开发模式中非常普遍。它允许客户端向服务器端上传文件，但对于大文件的上传却无能为力，比如：文件太大导致传输时间较长，甚至导致表单超时从而使上传失败。在云计算技术迅猛发展的今天，数据业务呈现出数据量大、文件操作频繁的趋势，传统的文件上传方式已经不能满足我们的需求。

目前，基于web方式的文件上传主要有两种方式：即采用HTTP协议和FTP协议实现

1、采用HTTP协议实现文件上传

在过去的Html中，表单不能实现文件的上传，这多少限制了一些网页的功能。RFC1867规范（即Html中实现基于表单的文件上传）对表单作出了扩展，增加了一个表单元素〈input type＝file>。通过使用这个元素，浏览器会自动生成一个输入框和一个按钮，输入框可供用户填写本地的文件名和路径名，按钮可以让浏览器打开一个文件选择框供用户选择文件。其上传过程如下：

1）客户端用户选择要上传的文件

2）服务器获得一个客户端向服务器发出的数据流

3）分析上传的文件格式

4）根据分析结果将多个文件依次输出服务器端的目标文件中；

2、采用FTP协议实现多个文件的上传

FTP协议是Internet上用来传送文件的协议，规定了Internet上文件互相传送的标准。具体实现过程：

1）与FTP服务器建立连接；

2）初始化文件的传输方式，包括ASCII和BINARY两种方式；

3）将文件输出到文件输入流中；

4）输入流中的数据读入字节数组中；

5）字节数组中的数据写入输出流（将数据写入到一个网络链接上）。

这样和源文件同名的一个文件就复制到了服务器端。

由以上两种方式我们可以看出利用HTTP协议上传文件中表单的超时问题会导致某些大文件传输失败；采用FTP协议实现多个文件的上传比较简单，容易实现。一般是编写的客户端的程序，但服务器端的安全设置会比较复杂。另外，FTP还有以下缺点：数据传输模式不合理、工作方式设计不合理、与防火墙工作不协调、密码安全策略不完善和传输效率低等，已经有学者提出文件传输协议（FTP）将会消亡的观点。 

发明内容

基于以上分析，本发明提供了一种基于并发传输模式的大文件上传方法。

本发明的目的在于克服现有的技术的不足，提供一种基于并发传输模式的大文件上传方法，包括：文件解析模块、并发传输模块、文件还原模块。客户端在文件解析模块将大文件读取转化为字节流并拆分为大小相同的多个字节流，并发传输模块向文件接收端并发发送这些字节流，文件接收端收到文件流后根据顺序标记通过文件还原模块将字节流重新组合还原成原来的文件。

本发明是通过以下技术方案实现的：

（1）文件解析模块：

I 文件发送端读取目标文件内容（ASCII编码）为字节流A；

II 将目标文件字节流拆分为若干个不大于100MB的字节流；

III在每个字节流首尾添加开始和结束标记以及校验信息，并在首部添加此字节流在源文件字节流A中的序号；

（2）并发传输模块：将各字节流内容并发传输到文件接收端；

（3）分析纠正器：通过字节流首尾的开始、结束标记以及校验信息验证该段数据的有效性，若有效则存储，若无效则发出请求该段数据的请求，直到传输完所有字节流数据；

（4）文件还原模块：文件接收端接收各个字节流完成后，按照首部标识的顺序组合字节流，并保存为同格式的同名文件；

本发明的有益效果是：将原大文件拆分为多个字节流，并发传输可以大幅提高大文件上传的效率，传输过程中的冗余校验功能可以保证文件上传的准确性，解决了大文件上传存在的效率低以及容易出错的问题。

弥补了传统文件上传方法串行传输速度慢的缺点，增加了字节流的校验机制提高上传效率与准确性，同时文件解析模块在文件发送端完成，大大减轻了文件接收端的压力，不论在大文件上传还是服务器综合利用方面均具有很高的技术价值。

附图说明

图1是文件上传示意图。

具体实施方式

下面参照附图，对本发明的内容以上传系统镜像ISO文件为例，采用文件解析、并发文件传输以及文件还原的步骤来描述这一结构的实现过程。