[发明专利]一种批量文件的报错数据处理方法及装置

说明书

本发明可用于金融领域中的软件测试技术领域，本发明提供了一种批量文件的报错数据处理方法及装置，批量文件的报错数据处理方法包括：根据批量文件的历史报错数据以及所述历史报错数据所对应的报错原因建立二部图模型；对所述历史报错数据进行聚类，以将所述历史报错数据划分为多个数据集合；将待处理报错数据与所述多个数据集合进行匹配，以确定所述待处理报错数据所对应的数据集合；根据所述二部图模型以及所述待处理报错数据所对应的数据集合确定所述待处理报错数据的报错原因。本发明可以对报错日志进行聚类分析，根据报错信息在线实时定位报错原因，并对从报错原因进行智能匹配，匹配完成后自动实施解决方案。

技术领域

本申请属于计算机批量作业处理技术领域，具体涉及一种批量文件的报错数据处理方法及装置。

背景技术

针对现有技术中的开放式平台系统，涉及文件加载类的批量作业在测试环境经常出现执行中断的现象，分析其原因是由于测试环境上游应用文件生成较晚或者文件传输中断等原因造成。完整的文件交互类批量作业加载流程是：上游主机/平台应用生成文件-文件传输系统处理-文件自动下传-下游平台应用接收-下游平台应用批量作业定时加载。

然而，由于测试环境存在如下几个现实原因，导致大多数的该处理流程无法正常且有序地进行：

(1)测试环境主机文件生成时间是晚于日切时间大约1-1.5天时间，而下游平台批量作业定时加载时间一般是日切后几个小时内，另外上游是平台系统的话，也会存在不规范记载或者依赖其上游文件而导致文件无法及时生产，因此下游平台批量作业加载会由于文件未到齐而执行中断；

(2)“文件自动下传”环节是依赖各平台应用正常配置自动传输任务，且自动传输进程运行正常。测试环境由于存在上游应用未配置自动传输任务或自动传输进程异常停止等原因，导致上游文件无法自动传输到下游平台应用批量服务器的文件接收目录，同样下游平台批量作业加载由于文件未到齐而执行中断；

(3)另外，由于周期性的版本内容改造和优化，存在由于程序问题导致上游生成的文件(BIN文件和CHK文件)不正确，如CHK文件校验未通过，BIN文件格式错误加载异常、BIN文件数据冲突等。由于程序异常导致批量作业执行中断；

(4)此外，下游本身可能也由于程序问题或环境异常等原因导致批量作业执行中断，如批量作业加载报数据库表字段不满足、批量执行器不在线、磁盘空间满、文件目录操作权限不够等。

发明内容

本发明可用于计算机批量作业处理技术在金融方面应用的技术领域，也可用于除金融领域之外的任意领域，本发明可以对报错日志进行聚类分析，根据报错信息在线实时定位报错原因，并对从报错原因进行智能匹配，匹配完成后自动实施解决方案。

为解决本申请背景技术中的技术问题，本发明提供以下技术方案：

第一方面，本发明提供一种批量文件的报错数据处理方法包括：

根据批量文件的历史报错数据以及所述历史报错数据所对应的报错原因建立二部图模型；

对所述历史报错数据进行聚类，以将所述历史报错数据划分为多个数据集合；

将待处理报错数据与所述多个数据集合进行匹配，以确定所述待处理报错数据所对应的数据集合；

根据所述二部图模型以及所述待处理报错数据所对应的数据集合确定所述待处理报错数据的报错原因。

一实施例中，所述根据批量文件的历史报错数据以及所述历史报错数据所对应的报错原因建立二部图模型，包括：

根据所述历史报错数据生成所述二部图模型的第一类顶点；

根据所述历史报错数据所对应的报错原因生成所述二部图模型的第二类顶点；