[发明专利]并发文件的传输方法及装置

说明书

本申请提供了一种并发文件的传输方法及装置，该方法包括：基于预设的Netty框架，获取目标并发文件的目标接收端当前的并行度数据；根据所述并行度数据、所述目标并发文件中的文件个数和各个文件大小，对所述目标并发文件进行打包处理，对应得到多个数据包；将各个所述数据包分别平均分配给与所述并行度数据对应的各个线程，以应用各个所述线程分别将各个所述数据包发送至所述目标接收端，以使该目标接收端对各个所述数据包进行解压处理得到所述目标并发文件。本申请能够提高文件传输的效率，节省网络带宽和处理器资源的占用。

技术领域

本申请涉及网络并发传输技术领域，尤其涉及一种并发文件的传输方法及装置。

背景技术

在计算机的应用领域，随着计算机技术的迅速发展，对文件传输的信息量、准确性和时效性不断提出新要求。因此如何进一步提高文件传输效率是各大企业所研究的热点问题。

目前主流的文件传输方式是对文件进行串行传输方式。这种传输方式在传输小文件时性能较好，但是在传输超大型文件时，会变得非常低效，因为只有一个线程去抢夺CPU的执行权，其占用的执行时间是非常少的。因此，开始采用多线程去处理传输文件，但多线程传输其相对的占用CPU执行时间的百分比会提高，也就意味着CPU会花费更多时间去进行文件传输。在文件传输方面，主流的将大文件分割成若干字节流传输，之后在接收端接收后根据顺序标记将字节流重组，最终存储在存储设备上，这种方式会因为传输文件过多，使得IO请求次数增加，从而在一定程度上影响了小文件传输和存储的效率。

发明内容

针对现有技术中的问题，本申请提出了一种并发文件的传输方法及装置，能够提高文件传输的效率，节省网络带宽和处理器资源的占用。

为了解决上述技术问题，本申请提供以下技术方案：

第一方面，本申请提供一种并发文件的传输方法，包括：

基于预设的Netty框架，获取目标并发文件的目标接收端当前的并行度数据；

根据所述并行度数据、所述目标并发文件中的文件个数和各个文件大小，对所述目标并发文件进行打包处理，对应得到多个数据包；

将各个所述数据包分别平均分配给与所述并行度数据对应的各个线程，以应用各个所述线程分别将各个所述数据包发送至所述目标接收端，以使该目标接收端对各个所述数据包进行解压处理得到所述目标并发文件。

进一步地，在所述基于预设的Netty框架，获取目标并发文件的目标接收端当前的并行度数据之前，还包括：

接收针对所述目标并发文件的传输请求，其中，所述传输请求中包括该目标并发文件对应的目标接收端信息。

进一步地，所述基于预设的Netty框架，获取目标并发文件的目标接收端当前的并行度数据，包括：基于所述预设的Netty框架，获取所述目标接收端当前已开启的线程数；根据所述目标接收端当前已开启的线程数和在预设时间范围内的用户请求的任务处理时间的均值，获取所述目标接收端当前的并行度。

进一步地，在所述基于预设的Netty框架，获取目标并发文件的目标接收端当前的并行度数据之前，还包括：获取所述目标接收端的缓冲区容量；相对应的，各个所述数据包的大小均不超过所述缓冲区容量。

第二方面，本申请提供一种并发文件的传输装置，包括：

获取并行度模块，用于基于预设的Netty框架，获取目标并发文件的目标接收端当前的并行度数据；

打包模块，用于根据所述并行度数据、所述目标并发文件中的文件个数和各个文件大小，对所述目标并发文件进行打包处理，对应得到多个数据包；