[发明专利]一种数据处理方法和装置

权利要求书

1.一种数据处理方法，其特征在于，包括：

与终端建立长连接通道，加载待处理的数据文件；

动态计算所述数据文件的每个分组的最大数据条数，并以分组为单位对所述数据文件进行业务处理；

每处理完一个分组数据，则根据所述数据文件的处理结果得到进度数据，并通过所述长连接通道将所述进度数据推送至所述终端。

2.根据权利要求1所述的方法，其特征在于，动态计算所述数据文件的每个分组的最大数据条数，并以分组为单位对所述数据文件进行业务处理，包括：

计算所述数据文件的数据总条数；

根据预设的期望响应时长、上一分组数据的实际数据条数和实际处理时长计算下一分组数据的最大数据条数，对所述下一分组数据进行业务处理，并记录所述下一分组数据的实际处理时长。

3.根据权利要求2所述的方法，其特征在于，根据预设的期望响应时长、上一分组数据的实际数据条数和实际处理时长计算下一分组数据的最大数据条数，包括：

将预设的期望响应时长乘以上一分组数据的实际数据条数并除以所述上一分组数据的实际处理时长，得到下一分组数据的最大数据条数。

4.根据权利要求3所述的方法，其特征在于，对所述下一分组数据进行业务处理，包括：

将所述数据文件的数据总条数减去已处理数据的数据条数，得到待处理数据的数据条数；

若所述下一分组数据的最大数据条数小于所述待处理数据的数据条数，则将所述下一分组数据的最大数据条数作为所述下一分组数据的实际数据条数进行业务处理；

若所述下一分组数据的最大数据条数大于等于所述待处理数据的数据条数，则将所述待处理数据的数据条数作为所述下一分组数据的实际数据条数进行业务处理。

5.根据权利要求4所述的方法，其特征在于，通过所述长连接通道将所述进度数据推送至所述终端之后，还包括：

若所述下一分组数据的最大数据条数大于等于所述待处理数据的数据条数，则在完成对所述下一分组数据的业务处理之后，关闭所述长连接通道。

6.根据权利要求2所述的方法，其特征在于，每处理完一个分组数据，则根据所述数据文件的处理结果得到进度数据，并通过所述长连接通道将所述进度数据推送至所述终端，包括：

每处理完一个分组数据，则根据所述数据文件的数据总条数和已处理数据的数据条数计算进度数据，并通过所述长连接通道将所述进度数据推送至所述终端。

7.根据权利要求1所述的方法，其特征在于，动态计算所述数据文件的每个分组的最大数据条数，并以分组为单位对所述数据文件进行业务处理，包括：

计算所述数据文件的数据总条数，将所述数据文件的数据总条数推送至所述终端；

根据预设的期望响应时长、上一分组数据的实际数据条数和实际处理时长计算下一分组数据的最大数据条数，对所述下一分组数据进行业务处理，并记录所述下一分组数据的实际处理时长。

8.根据权利要求7所述的方法，其特征在于，每处理完一个分组数据，则根据所述数据文件的处理结果得到进度数据，并通过所述长连接通道将所述进度数据推送至所述终端，包括：

每处理完一个分组数据，则通过所述长连接通道将已处理数据的数据条数推送至所述终端，以使所述终端根据所述数据文件的数据总条数和已处理数据的数据条数计算进度数据。

9.一种数据处理装置，其特征在于，包括：

加载模块，用于与终端建立长连接通道，加载待处理的数据文件；

处理模块，用于动态计算所述数据文件的每个分组的最大数据条数，并以分组为单位对所述数据文件进行业务处理；

推送模块，用于每处理完一个分组数据，则根据所述数据文件的处理结果得到进度数据，并通过所述长连接通道将所述进度数据推送至所述终端。