[发明专利]一种消息消费的优化方法与终端

权利要求书

1.一种消息消费的优化方法，其特征在于，包括步骤：

S1、根据所述kafka系统的存储区的数量建立数量对应的消费主线程，由每个所述消费主线程建立预设数量的子线程；

S2、由所述消费主线程向所述kafka系统的各个分区分别获取预设数量的消息，并根据所述消息的第一业务主键和预设的业务逻辑条件，对所述消息进行分组；

S3、由所述消费主线程根据分组结果将所述消息分配至自身的所述子线程进行处理。

2.根据权利要求1所述的一种消息消费的优化方法，其特征在于，步骤S2中所述根据所述消息的第一业务主键和预设的业务逻辑条件，对所述消息进行分组包括：

识别所有所述消息中的第一业务主键，将所述第一业务主键相同的两条以上的所述消息归为一组并记录到重复集合中，其余消息记录至不重复集合中；

所述步骤S3具体为：

由所述消费主线程将记录在所述不重复集合中的所有消息随机分配至自身的子线程进行并发处理，同时将记录在重复集合中的所述消息以组为单位随机分配至自身的所述子线程中，由所述子线程依照所述消息中的时间信息对所述消息进行顺序处理。

3.根据权利要求2所述的一种消息消费的优化方法，其特征在于，所述识别所有所述消息中的第一业务主键，将所述第一业务主键相同的两条以上的所述消息归为一组并记录到重复集合中，其余消息记录至不重复集合中具体为：

识别所有所述消息中的第一业务主键，计算所述第一业务主键的哈希值，根据所述哈希值判断所述消息是否具有相同的所述第一业务主键，将所述第一业务主键相同的两条以上的所述消息归为一组并记录到重复集合中，其余消息记录至不重复集合中。

4.根据权利要求2所述的一种消息消费的优化方法，其特征在于，由所述子线程依照所述消息中的时间信息对所述消息进行顺序处理具体为：

由所述子线程判断属于同一所述分组中的所述消息的数量是否大于预设阈值，若是则对所述消息根据第二业务主键再次进行分组，得到二次分组信息，根据二次分组信息创建数量对应的孙线程对所述消息进行处理。

5.根据权利要求1所述的一种消息消费的优化方法，其特征在于，所述步骤S3之后还包括步骤：

S31、判断所有所述消息是否已经处理完成，若是则返回步骤S2；

S4、接收用户请求，根据用户请求对每个所述消费主线程的所述子线程的数量进行调整。

6.一种消息消费的优化终端，包括处理器、存储器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现以下步骤：

S1、根据所述kafka系统的存储区的数量建立数量对应的消费主线程，由每个所述消费主线程建立预设数量的子线程；

S2、由所述消费主线程向所述kafka系统的各个分区分别获取预设数量的消息，并根据所述消息的第一业务主键和预设的业务逻辑条件，对所述消息进行分组；

S3、由所述消费主线程根据分组结果将所述消息分配至自身的所述子线程进行处理。

7.根据权利要求6所述的一种消息消费的优化终端，其特征在于，步骤S2中所述根据所述消息的第一业务主键和预设的业务逻辑条件，对所述消息进行分组包括：

识别所有所述消息中的第一业务主键，将所述第一业务主键相同的两条以上的所述消息归为一组并记录到重复集合中，其余消息记录至不重复集合中；

所述步骤S3具体为：

由所述消费主线程将记录在所述不重复集合中的所有消息随机分配至自身的子线程进行并发处理，同时将记录在重复集合中的所述消息以组为单位随机分配至自身的所述子线程中，由所述子线程依照所述消息中的时间信息对所述消息进行顺序处理。