[发明专利]异步数据上传处理方法及系统

说明书

技术领域

本发明涉及数据处理领域，尤其涉及异步数据上传处理方法及系统。

背景技术

现有的异步数据上传处理方法的流程：客户端与服务端建立连接，客户端通过链接发送数据，等待服务端处理完成，返回处理成功消息后，客户端与服务端断开链接。此技术方案会长期占用连接，严重影响系统响应能力以及链路的占用时间。

发明内容

本发明实施例所要解决的技术问题在于，提供一种异步数据上传处理。其具有提高系统响应时间以及减少链路占用时间的优点。

为了解决上述技术问题，本发明实施例提供了一种异步数据上传处理方法，所述方法包括如下步骤：服务端建立与客户端的链路；服务端通过所述链路接收所述客户端发送的数据，接收到数据后把所述数据以二进制文件方式写入服务器指定目录，并得到所述指定目录的唯一的文件路径；服务端把所述唯一的文件路径和所述数据的信息写入队列服务器中，并向客户端返回成功标记。

可选的，所述方法还包括如下步骤：

服务端从队列服务器中读取所述唯一的文件路径和所述数据的信息,然后通过所述唯一的文件路径提取对应的数据文件,读取所述数据文件按不同文件类型加载对应数据处理模块来处理所述数据文件，处理完成后把结果写入数据库。

可选的，所述方法还包括：

服务端处理完所述数据文件后，读取队列服务器中所述数据文件中的下一个文件路径，依据所述下一个文件路径提取对应的数据文件进行数据处理。

第二方面，提供一种服务端，所述服务端包括：链接单元，用于建立与客户端的链路；收发单元，用于通过所述链路接收所述客户端发送的数据；处理单元，用于接收到数据后把所述数据以二进制文件方式写入服务器指定目录，并得到所述指定目录的唯一的文件路径；把所述唯一的文件路径和所述数据的信息写入队列服务器中，并向客户端返回成功标记。

可选的，所述处理单元，用于从队列服务器中读取所述唯一的文件路径和所述数据的信息,然后通过所述唯一的文件路径提取对应的数据文件,读取所述数据文件按不同文件类型加载对应数据处理模块来处理所述数据文件，处理完成后把结果写入数据库。

可选的，所述处理单元，用于处理完所述数据文件后，读取队列服务器中所述数据文件中的下一个文件路径，依据所述下一个文件路径提取对应的数据文件进行数据处理。

第三方面，提供一种异步数据上传处理系统，所述系统包括：客户端与服务端；所述服务端，用于建立与客户端的链路；所述客户端，用于通过所述链路发送数据；所述服务端，还用于接收到数据后把所述数据以二进制文件方式写入服务器指定目录，并得到所述指定目录的唯一的文件路径；把所述唯一的文件路径和所述数据的信息写入队列服务器中，并向客户端返回成功标记。

可选的，所述服务端，用于从队列服务器中读取所述唯一的文件路径和所述数据的信息,然后通过所述唯一的文件路径提取对应的数据文件,读取所述数据文件按不同文件类型加载对应数据处理模块来处理所述数据文件，处理完成后把结果写入数据库。

可选的，所述服务端，用于处理完所述数据文件后，读取队列服务器中所述数据文件中的下一个文件路径，依据所述下一个文件路径提取对应的数据文件进行数据处理。

第四方面，提供一种计算机可读存储介质，其存储用于电子数据交换的计算机程序，其中，所述计算机程序使得计算机执行第一方面提供的方法。

本领域普通技术人员将了解，虽然下面的详细说明将参考图示实施例、附图进行，但本发明并不仅限于这些实施例。而是，本发明的范围是广泛的，且意在仅通过后附的权利要求限定本发明的范围。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本发明提供的一种异步数据处理系统的结构示意图。

图2是本发明提供的一种异步数据上传处理方法的流程示意图。

图3是本发明异步数据上传处理装置的结构图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。