[发明专利]数据批量处理方法和装置

说明书

本申请提供了一种数据批量处理方法和装置，其中，该方法包括：业务前置系统接收多个分行前置系统发送的第一批量请求数据；业务前置系统对第一批量请求数据进行切片处理，得到多个第一数据切片；业务前置系统将多个第一数据切片发送至流处理系统；流处理系统对接收到的多个第一数据切片进行分布式流处理，生成第一处理结果文件。上述方案可以提高处理效率，实现大批量交易请求的实时处理。

技术领域

本申请涉及数据处理技术领域，特别涉及一种数据批量处理方法和装置。

背景技术

目前，实时性批量交易业务量日益增长，如分行批量还款、分行批量查询应还、公积金新旧模式转换、自动扣款批量入账等。随着银行业务的持续增长，前端上送的批量代理文件持续增大。传统批转单模式有两种：单AP单线程循环发送交易请求、单AP多线程循环发送交易请求。

然而，传统的批转单模式存在实时性差且数据处理效率低的问题。

针对上述问题，目前尚未提出有效的解决方案。

发明内容

本申请实施例提供了一种数据处理技术领域，以解决现有技术中批量数据处理的实时性差且处理效率低有限的问题。

本申请实施例还提供了一种数据批量处理方法，包括：业务前置系统接收多个分行前置系统发送的第一批量请求数据；业务前置系统对第一批量请求数据进行切片处理，得到多个第一数据切片；业务前置系统将多个第一数据切片发送至流处理系统；流处理系统对接收到多个第一数据切片进行分布式流处理，生成第一处理结果文件。

本申请实施例还提供了一种数据批量处理方法，应用于业务前置系统，包括：接收多个分行前置系统发送的第一批量请求数据；对第一批量请求数据进行切片处理，得到多个第一数据切片；将多个第一数据切片发送至流处理系统，其中，流处理系统对多个第一数据切片进行分布式流处理，生成第一处理结果文件。

本申请实施例还提供了一种数据批量处理方法，应用于流处理系统，包括：接收业务前置系统发送的多个第一数据切片，其中，多个第一数据切片是业务前置系统对从多个分行前置系统接收到的第一批量请求数据进行切片后得到的；对多个第一数据切片进行分布式流处理，生成第一处理结果文件；将第一处理结果文件发送至业务前置系统。

本申请实施例还提供了一种数据批量处理装置，位于业务前置系统，包括：接收模块，用于接收多个分行前置系统发送的第一批量请求数据；切片模块，用于对第一批量请求数据进行切片处理，得到多个第一数据切片；发送模块，用于将多个第一数据切片发送至流处理系统，其中，流处理系统对多个第一数据切片进行分布式流处理，生成第一处理结果文件。

本申请实施例还提供了一种数据批量处理装置，位于流处理系统，包括：接收模块，用于接收业务前置系统发送的多个第一数据切片，其中，多个第一数据切片是业务前置系统对从多个分行前置系统接收到的第一批量请求数据进行切片后得到的；处理模块，用于对多个第一数据切片进行分布式流处理，生成第一处理结果文件；发送模块，用于将第一处理结果文件发送至业务前置系统。

本申请实施例还提供一种计算机设备，包括处理器以及用于存储处理器可执行指令的存储器，所述处理器执行所述指令时实现上述任意实施例中所述的数据批量处理方法的步骤。

本申请实施例还提供一种计算机可读存储介质，其上存储有计算机指令，所述指令被执行时实现上述任意实施例中所述的数据批量处理方法的步骤。