[发明专利]一种数据实时处理方法及数据实时处理系统

说明书

本发明提供一种数据实时处理方法及数据实时处理系统，包括：显示用户界面并接收第一输入，根据所述第一输入，生成流数据的任务的算子；所述算子包括应用规则算子，所述应用规则算子包括至少一项规则集合中的规则；根据所述任务的算子，构建流数据的任务；运行所述流数据的任务。本发明实施例中数据实时处理系统能够处理实时流数据，极大的提高了数据处理效率。

技术领域

本发明涉及信息技术领域，尤其涉及一种数据实时处理方法及数据实时处理系统。

背景技术

随着数据的急剧膨胀，大数据处理技术得到了飞速的发展。目前，大数据处理平台按照计算模式可以划分为离线计算和实时计算。随着经济社会信息实时化的程度不断提高，人们对数据实时计算的需求也越来越高。例如：用于反欺诈、判断资金是否流入非法途径的风险控制系统(风控系统、合规检查等)、用于数据抽取、转换、加载(ExtractTransform Load，简称ETL)的数据处理系统等场景需要用到实时计算。

然而现有的规则引擎和数据实时处理系统算子是分开执行，现有的规则引擎仅能处理离线数据，数据处理效率低。

发明内容

本发明实施例提供一种数据实时处理方法及数据实时处理系统，解决现有的规则引擎仅能处理离线数据，数据处理效率低的问题。

为了解决上述技术问题，本发明实施例提供了一种数据实时处理方法，所述方法包括：

显示用户界面并接收第一输入，根据所述第一输入，生成流数据的任务的算子；所述算子包括应用规则算子，所述应用规则算子包括至少一项规则集合中的规则；

根据所述任务的算子，构建流数据的任务；

运行所述流数据的任务。

优选的，上述方法中，所述显示用户界面并接收第一输入，根据所述第一输入，生成流数据的任务的算子的步骤之前，还包括：

显示规则创建界面；

接收第二输入，根据所述第二输入，创建所述规则集合；

其中所述规则集合包含至少一项规则。

优选的，上述方法中，所述方法还包括：基于所述应用规则算子的业务场景，将多项规则中相同的内容提取为规则模板，并将所述规则模板存储在模板数据库。

优选的，上述方法中，所述方法还包括：

查询所述模板数据库，获取所述规则模板的列表；

从所述列表中选择目标规则模板；

根据所述目标规则模板生成对应的规则。

优选的，上述方法中，所述任务还包括：算子与算子之间的连接关系。

优选的，上述方法中，所述规则包括以下至少之一：向导式规则、规则集、评分卡、决策表、决策树、决策流和模型。

优选的，上述方法中，所述决策流由组织成有向图结构的执行节点构成，所述执行节点包括：子规则节点，路由节点，开始节点。

优选的，上述方法中，根据路由节点所配置的后续节点计算算法确定所述路由节点的后续执行节点，所述路由节点能够在指定条件满足时结束所述决策流的循环执行。

优选的，上述方法中，所述运行所述流数据的任务的步骤包括：

接收流数据；

使用所述算子中的应用规则算子对所述流数据进行计算，生成输出事件；

输出并显示所述输出事件。

优选的，上述方法中，所述应用规则算子包含规则引擎；