[发明专利]一种异常导入数据的处理方法、装置及设备

权利要求书

1.一种异常导入数据的处理方法，其特征在于，所述方法包括：

获取待导入数据，判断所述待导入数据是否满足异常条件；所述异常条件包括所述待导入数据的数据字段数量不符合目标字段数量和/或所述待导入数据的字段格式不符合预设字段格式；

若所述待导入数据满足异常条件，将所述待导入数据确定为待排查异常数据，将所述待排查异常数据写入异常数据表中；

从所述异常数据表中选取目标异常数据，将所述目标异常数据导入目标数据库；

若导入成功，则将所述目标异常数据的异常问题确定为数据异常问题；

若导入不成功，则将所述目标异常数据的异常问题确定为入库异常问题。

2.根据权利要求1所述的方法，其特征在于，所述将所述待排查异常数据写入异常数据表中，包括：

获取所述待排查异常数据所要导入的数据表的目标表名和所述待排查异常数据所要导入目标数据库的预定导入时间；

获取所述待排查异常数据的列信息、数据信息和异常信息，将所述列信息、所述数据信息和所述异常信息组成目标值字段；

将所述目标表名、所述目标导入时间和所述目标值字段写入所述异常数据表中。

3.根据权利要求2所述的方法，其特征在于，所述从所述异常数据表中选取目标异常数据，包括：

选取目标数据库中的数据表作为待写入数据表；

获取所述待写入数据表的表名作为待写入表名；获取所述待写入数据表的日期信息作为待写入日期；

根据所述待写入表名和所述待写入日期，在所述异常数据表中查询是否具有对应的待排查异常数据；

若具有，将所述待排查异常数据作为目标异常数据。

4.根据权利要求1所述的方法，其特征在于，所述将所述目标异常数据导入目标数据库，包括：

获取所述目标异常数据的键值数据，对所述键值数据进行拼接，得到目标键值数据；

将所述目标键值数据写入目标数据库。

5.根据权利要求1所述的方法，其特征在于，在所述获取待导入数据，判断所述待导入数据是否是待排查异常数据之前，所述方法还包括：

获取原始数据，对所述原始数据进行数据聚合和数据转换，得到源数据；

从所述源数据中选取待导入数据。

6.根据权利要求5所述的方法，其特征在于，在所述获取源数据，对所述原始数据进行数据聚合和数据转换，得到源数据之前，所述方法还包括：

从配置文件中获取第一数据文件的第一文件信息，所述第一文件信息包括第一位置信息和第一数据信息；所述第一数据文件为储存原始数据的文件；

利用所述第一位置信息查询所述第一数据文件是否存在；

若存在，利用所述第一数据信息查询所述第一数据文件中的原始数据是否完整；

所述获取原始数据，包括：

若所述第一数据文件中的数据完整，则将所述第一数据文件中的数据作为原始数据；

从所述第一数据文件中获取原始数据。

7.根据权利要求1所述的方法，其特征在于，在所述获取待导入数据，判断所述待导入数据是否是待排查异常数据之前，所述方法还包括：

从配置文件中获取第二数据文件的第二文件信息，所述第二文件信息包括第二位置信息和第二数据信息；所述第二数据文件为储存源数据的文件；

利用所述第二位置信息查询所述第二数据文件是否存在；

若存在，利用所述第二数据信息查询所述第二数据文件中的数据是否完整；

所述获取待导入数据，包括：

若所述第二数据文件中的数据完整，则将所述第二数据文件中的数据作为源数据；

从所述第二数据文件中获取待导入数据。