[发明专利]数据批量对比方法、装置、设备及存储介质

说明书

本发明涉及大数据领域，公开了一种数据批量对比方法、装置、设备及存储介质。该方法包括：获取批量对比信息，并提取所述批量对比信息中的数据库信息、用于数据库查询的SQL语句；根据所述数据库信息，连接对应的源端数据库和目标端数据库，并在连接后的源端数据库和目标端数据库中执行SQL语句，生成树状对比信息；根据所述树状对比信息确定所述源端数据库的第一查询结果、所述目标端数据库的第二查询结果，以及所述源端数据库和所述目标端数据库之间的差异信息；基于所述第一查询结果、所述第二查询结果和所述差异信息生成数据对比结果，并将数据对比结果进行展示。本发明实现了测试联调过程中的数据批量对比，提升了数据对比效率。

技术领域

本发明涉及大数据领域，尤其涉及一种数据批量对比方法、装置、设备及存储介质。

背景技术

系统测试是项目发布前重要的一环，现实中可采用黑盒测试、白盒测试、以及介于两者之间的灰盒测试，即联调测试。其中，联调测试的关注点是系统模块间的接口，重点在于模块间接口的正确性、各模块间的数据流和控制流是否按照设计实现其功能、以及集成后整体功能的正确性。

而目前在联调测试过程中，需要对源端数据库和目标数据库进行对比查询，以确定两者之间的存储数据是否一致，以保证联调测试结果的准确度。在源端数据库和目标端数据库查询多张表的数据时，采用的方法是每次需要查询时进入源端数据库和目标数据库中进行手动查询，使得联调测试过程中对源端数据库和目标数据库之间的数据对比查询的效率低。

发明内容

本发明的主要目的在于解决联调测试过程中对源端数据库和目标数据库之间的数据对比查询的效率低的问题。

本发明第一方面提供了一种数据批量对比方法，包括：获取批量对比信息，并提取批量对比信息中的数据库信息、用于数据库查询的SQL语句；根据数据库信息，连接对应的源端数据库和目标端数据库，并在连接后的源端数据库和目标端数据库中执行SQL语句，生成树状对比信息；根据树状对比信息确定源端数据库的第一查询结果、目标端数据库的第二查询结果，以及源端数据库和目标端数据库之间的差异信息；基于第一查询结果、第二查询结果和差异信息生成数据对比结果，并将数据对比结果进行展示。

可选的，在本发明第一方面的第一种实现方式中，在连接后的源端数据库和目标端数据库中执行SQL语句，生成树状对比信息包括：配置连接后的源端数据库和目标端数据库中对应存储数据表之间的对比关系，得到对比关系表；按照数据来源将对比关系表划分为第一结构表和第二结构表，以及在对比关系表中创建聚集主键表；抽取第一结构表和第二结构表中的每条数据，并计算每条数据的数值，以及将各数值依次与聚集主键表中的聚集主键进行对比；根据对比的结果，通过聚集主键表对应的底层索引树，参照预置对比规则采用各数值对聚集主键表调整，得到树状对比信息。

可选的，在本发明第一方面的第二种实现方式中，根据对比的结果，通过聚集主键表对应的底层索引树，参照预置对比规则采用各数值对聚集主键表调整，得到树状对比信息包括：根据对比的结果，确定各数值对应的第一主键列对比值和第一非主键列对比值、以及聚集主键表中各聚集主键对应的第二主键列对比值和第二非主键列对比值；依次判断是否存在与各第一主键列对比值相同的第二主键列对比值；若不存在与第一主键列对比值相同的第二主键列对比值，则将对应的数值插入聚集主键表对应的底层索引树中；若存在与第一主键列对比值相同的第二主键列对比值，则判断是否存在与对应的数值的第一非主键列对比值相同的第二主键列对比值；若不存在与第一非主键列对比值相同的第二非主键列对比值，则将对应的数值和第一非主键列更新至底层索引树中，得到树状对比信息。