[发明专利]脚本检测方法、装置、计算机设备及存储介质

说明书

本发明涉及数据处理及人工智能领域，公开了一种脚本检测方法、装置、计算机设备及存储介质。通过根据待执行的脚本数据配置脚本检测控件，执行脚本检测控件以判断脚本数据对应的表中是否为分区表，并解析分区表中是否有字段更新，若是，则检测是否存在分区连接字段，若不存在，则生成检测日志，并提示异常。通过这样的方式，以实现对分区表异常的检测，避免了分区表中新增字段后执行脚本无法同步历史分区的问题。

技术领域

本发明涉及数据处理领域，尤其涉及一种脚本检测方法、装置、计算机设备及存储介质。

背景技术

为了提高数据查询等数据库操作的效率，目前数据库中的主机数据表通常会设置多个分区，然后通过批量处理脚本来实现批量操作，目前PH-BDSP系统在测试过程中，新增分区可以正常读写，且ddl脚本执行不会报错，但是在ddl脚本的关键字检查时，由于未添加cascade关键字，会导致历史分区的无法更新该新增字段。

发明内容

本申请的主要目的是提供一种脚本检测方法、装置、计算机设备及存储介质，以解决现有技术中分区表的新增字段无法更新至历史分区中的问题。

本发明第一方面提供了一种基于hive sql的脚本检测方法，所述脚本检测方法包括：

获取hive数据库中待执行的ddl脚本数据；

对所述ddl脚本数据进行解析，得到脚本对应的表信息，并基于所述表信息配置脚本检测控件，其中，所述脚本检测控件为用于检测所述ddl脚本数据关键字异常的函数工具；

执行所述脚本检测控件，提取所述ddl脚本数据中新增字段的脚本段；

判断所述脚本段中是否存在分区连接字段；

若不存在，则提取所述脚本段所在的地址信息，基于所述地址信息生成异常日志，并提示异常。

可选的，在本发明第一方面的第一种实现方式中，所述获取hive数据库中待执行的ddl脚本数据，包括：

确定待检测的测试库，其中所述测试库包括多个hive数据库；

基于所述测试库构建扫描脚本；

执行所述扫描脚本，遍历所述测试库中所有所述hive数据库的脚本的执行状态；

选择所述执行状态为待执行状态的ddl脚本数据。

可选的，在本发明第一方面的第二种实现方式中，所述对所述ddl脚本数据进行解析，得到脚本对应的表信息，并基于所述表信息配置脚本检测控件，包括：

调取预设的脚本解析工具，提取所述ddl脚本数据中的表创建命令和脚本目录地址；

基于所述表创建命令和脚本目录地址，配置空白的脚本检测控件中的测试内容，得到与所述ddl脚本数据对应的脚本检测控件。

可选的，在本发明第一方面的第三种实现方式中，所述基于所述表创建命令和脚本目录地址，配置空白的脚本检测控件中的测试内容，得到与所述ddl脚本数据对应的脚本检测控件，包括：

识别空白的脚本检测控件中的地址字段和启动控制字段；

利用mian方法将所述脚本目录地址添加至所述地址字段中，以及将所述表创建命令添加至所述启动控制字段中，得到与所述ddl脚本数据对应的脚本检测控件。

可选的，在本发明第一方面的第四种实现方式中，所述行所述脚本检测控件，提取所述ddl脚本数据中新增字段的脚本段，包括：

在接收到脚本检测指令后，执行所述脚本检测控件，遍历所述ddl脚本数据中的各脚本代码；

检测各所述脚本代码中是否存在新增字段；