[发明专利]流计算引擎的测试方法及装置

说明书

本发明提供了一种流计算引擎的测试方法及装置，方法为：获取目标场景，选择目标场景对应的多个测量参数，调用流计算引擎，通过流计算引擎对样本数据进行处理，得到流计算运行结果；根据流计算运行结果，得到多个测量参数对应的测量值，并经分析得到流计算引擎的测试结果。本发明的流计算引擎的测试方法及装置，通过程序自动调用不同的流计算引擎，并采集流计算引擎的运行结果，通过对运行结果进行分析，选择合适的流计算引擎，本发明将对流计算引擎的评价抽象为若干测试参数，通过调用流计算引擎，并监控其运行过程，从而获取各个测试参数的测量值，客观反映其性能，且效率高。

技术领域

本发明涉及数据处理领域，尤其涉及流计算引擎的测试方法及装置。

背景技术

流计算引擎用于对大规模流动数据在不断变化的运动过程中实时地进行分析。其应用场景广泛，且种类繁多。例如用于金融领域的数据处理。

在金融银行领域的日常运营过程中，往往会产生大量数据，这些数据的时效性往往较短。因此，金融银行领域是大数据流式计算最典型的应用场景之一，也是大数据流式计算最早的应用领域。在金融银行系统内部，每时每刻都有大量的往往是结构化的数据在各个系统间流动，并需要实时计算。同时，金融银行系统与其他系统也有着大量的数据流动，这些数据不仅有结构化数据，也会有半结构化和非结构化数据。通过对这些大数据的流式计算，发现隐含于其中的内在特征，可以帮助金融银行系统进行实时决策。

对于一个具体的应用场景而言，需要选择合适的流计算引擎进行数据处理。目前，需要技术人员操作，尝试不同的流计算引擎对数据进行处理，并根据经验选择合适的流计算引擎。这种做法效率低，且无法保证选择最合适的流计算引擎。

因此，现有技术中的缺陷是，运用不同的流计算引擎进行数据处理，需要技术人员操作，并根据经验选择合适的流计算引擎，这种做法效率低，且无法保证选择最合适的流计算引擎。

发明内容

针对上述技术问题，本发明提供一种流计算引擎的测试方法及装置，通过程序自动调用不同的流计算引擎，并采集流计算引擎的运行结果，通过对运行结果进行分析，选择合适的流计算引擎。

为解决上述技术问题，本发明提供的技术方案是：

第一方面，本发明提供一种流计算引擎的测试方法，包括：

步骤S1，获取目标场景；

步骤S2，选择所述目标场景对应的多个测量参数，所述多个测量参数为预先保存的测量参数；

步骤S3，调用流计算引擎，通过所述流计算引擎对样本数据进行处理，得到流计算运行结果，所述样本数据为所述目标场景对应的数据；

步骤S4，根据所述流计算运行结果，得到所述多个测量参数对应的测量值；

步骤S5，根据所述多个测量参数对应的测量值，经分析得到所述流计算引擎的测试结果。

本发明的流计算引擎的测试方法，其技术方案为：先获取目标场景；接着选择所述目标场景对应的多个测量参数，所述多个测量参数为预先保存的测量参数；然后调用流计算引擎，通过所述流计算引擎对样本数据进行处理，得到流计算运行结果；接着，根据所述流计算运行结果，得到所述多个测量参数对应的测量值；最后，根据所述多个测量参数对应的测量值，经分析得到所述流计算引擎的测试结果。

本发明的流计算引擎的测试方法，通过程序自动调用不同的流计算引擎，并采集流计算引擎的运行结果，通过对运行结果进行分析，选择合适的流计算引擎，本发明中将对流计算引擎的评价抽象为若干测试参数，通过调用流计算引擎，并监控其运行过程，从而获取各个测试参数的测量值，客观反映其性能，且效率高。

进一步地，通过多线程并行的方式调用所述流计算引擎，或通过串行的方式调用不同的所述流计算引擎。