[发明专利]基于大数据的信息智能处理方法及装置

说明书

本发明提供一种基于大数据的信息智能处理方法及装置，涉及信息处理技术，通过实时检测处理器中各个处理单元的处理量，当所述处理单元的处理量为0时，将所述处理单元标记为第一处理单元；然后获取待处理的总信息量，将总信息量分为多个子信息；获取各所述子信息的数据量，根据所述数据量和所述第一处理单元的处理量，获取所需所述第一处理单元的个数，将所述子信息分发给对应个数的所述第一处理单元。本发明通过将每个待处理的数据拆分成多个子信息，然后分发给处理器中的多个处于空闲状态的处理单元，使得每一个子信息的处理单元都是最佳处理状态，从而充分利用处理器的处理性能，提高处理的效率，同时还可以提高处理器的处理性能。

技术领域

本发明涉及信息处理技术，尤其涉及一种基于大数据的信息智能处理的方法及装置。

背景技术

在大数据的背景下，信息时代的特征之一就是数据的密集爆发,即数据的爆发式增长，人们需要处理的数据越来越多,对于数据处理的效率以及处理性能要求也越来越高。

目前，对数据进行处理的处理器在接收需要处理的数据后，对数据没有一个预处理的过程，而是进行统一批量的处理，导致处理器的利用率较低，从而导致处理效率低下，导致处理延迟等现象出现。

发明内容

本发明实施例提供一种基于大数据的信息智能处理方法及装置，可以提高数据的处理效率。

本发明实施例的第一方面，提供一种基于大数据的信息智能处理方法，包括：

实时检测处理器中各个处理单元的处理量，当所述处理单元的处理量为0时，将所述处理单元标记为第一处理单元；

获取待处理的总信息量，将所述总信息量分为多个子信息；

获取各所述子信息的数据量；

根据所述数据量和所述第一处理单元的处理量，获取所需所述第一处理单元的个数；

将所述子信息分发给对应个数的所述第一处理单元。

可选地，在第一方面的一种可能实现方式中，所述获取待处理的总信息量，将所述总信息量分为多个子信息，包括：

获取待处理的总信息量；

统计所述总信息量包含子信息的数量，按照数量将所述总信息量分为多个所述子信息。

可选地，在第一方面的一种可能实现方式中，在所述获取各所述子信息的数据量之后，还包括：

按照所述数据量对所述子信息进行降序排序；

相应的，将所述子信息分发给对应个数的所述第一处理单元，包括：

按照排序后的顺序，将所述子信息依次分发给对应个数的所述第一处理单元。

可选地，在第一方面的一种可能实现方式中，所述将所述子信息分发给对应个数的所述第一处理单元，包括：

将所述子信息均匀分发给对应个数的所述第一处理单元。

可选地，在第一方面的一种可能实现方式中，还包括:

将除所述第一处理单元以外的处理单元标记为第二处理单元；

若所述第一处理单元个数为0，且所述子信息的数据量大于0，统计多个所述第二单元的剩余处理量；

若所述剩余处理量大于所述第一处理单元的处理量，将多个所述第二单元标记为第三处理单元；

将所述子信息分发给所述第三处理单元。

可选地，在第一方面的一种可能实现方式中，所述将所述子信息分发给所述第三处理单元，包括：

获取各所述子信息的数据量；

根据所述数据量和所述第三处理单元的处理量，获取所需所述第三处理单元的个数；