[发明专利]数据调试方法、装置、介质、设备及程序产品

说明书

本申请提供一种数据调试方法、装置、介质、设备及程序产品。本申请实施例提供的数据调试方法，通过获取目标数据源，然后根据目标数据源以及预设数据映射关系生成待测试数据源，从而将调试系统原先并不支持的数据类型的目标数据源转化为调试系统的内部预设类型的数据源，进而使得调试系统可以是利用待测试数据源在调试系统对待调试逻辑程序进行调试，从而丰富调试系统在进行调试时所支持的数据源格式类型，以满足当前实际平台数据源格式的多样性的需求。

技术领域

本申请涉及互联网技术领域，尤其涉及一种数据调试方法、装置、介质、设备及程序产品。

背景技术

近年来，随着大数据技术的发展，涌现了各式各样的大数据计算引擎框架，例如：Storm、Spark、Flink等优秀的计算引擎框架。

在大数据领域，结构化查询语言(Structured Query Language，简称SQL)是面向用户的应用程序接口(Application Programming Interface，简称API)层。而对于SQL的调试，大部分当前开源Flink框架暂未提供有关SQL调试方面的功能支持。

而对于部分的平台(例如：阿里云的Flink SQL平台)，虽然支持进行SQL调试，但是，仅支持利用结构化的数据源进行调试，可见，其所支持的格式比较单一，无法满足当前实际平台数据源格式的多样性需求。

发明内容

本申请实施例提供一种数据调试方法、装置、介质、设备及程序产品，以满足对于实际平台数据源格式的多样性需求。

第一方面，本申请实施例提供一种数据调试方法，应用于调试系统，所述调试系统用于利用预设类型的数据源对所输入的逻辑程序进行调试，所述方法包括：

获取目标数据源，所述目标数据源中包括对待调试逻辑程序进行调试的数据，所述目标数据源的数据格式为目标类型，所述目标类型与所述预设类型不同；

根据所述目标数据源以及预设数据映射关系生成待测试数据源，所述预设数据映射用于将所述目标类型的数据映射为所述预设类型的数据；

利用所述待测试数据源在所述调试系统中对所述待调试逻辑程序进行调试。

在一种可能的设计中，所述根据所述目标数据源以及预设数据映射关系生成待测试数据源，包括：

获取所述目标数据源的目标模式信息，所述目标模式信息包括目标数据组织信息以及目标数据结构信息；

根据所述目标模式信息从所述目标数据源获取目标数据，所述目标数据为所述待调试逻辑程序调试所需的数据项目；

利用所述预设数据映射关系，将所述目标数据中的各个字段转换为所述预设类型的字段，以生成所述待测试数据源。

在一种可能的设计中，所述生成所述待测试数据源，包括：

通过目标对象对每个所述预设类型的字段进行封装，以生成对应的测试数据，所述待测试数据源包括所有所述预设类型的字段所对应的测试数据。

在一种可能的设计中，所述利用所述待测试数据源在所述调试系统中对所述待调试逻辑程序进行调试，包括：

调用所述调试系统的测试工程主类，以生成测试任务；

注册测试资源，以利用所述测试资源对所述待测试数据源进行处理，生成对应的数据列表；

执行所述待调试逻辑程序，并调用所述数据列表，以输出测试结果；

将所述测试结果通过测试日志的方式进行展示。

在一种可能的设计中，在所述根据所述目标数据源以及预设数据映射关系生成待测试数据源之后，还包括：