[发明专利]一种流数据处理方法和装置

权利要求书

1.一种流数据处理方法，其特征在于，所述方法包括：

接收第一元数据建立指令，响应所述第一元数据建立指令，根据预设元数据建立模型生成第一元数据；其中，所述预设元数据建立模型包括数据结构元模型、数据质量元模型、传输存储元模型和业务逻辑元模型；所述数据结构元模型，用于记录流数据的数据结构信息；所述数据质量元模型，用于定义数据类型转换、字段转换、归并、字段约束和对流数据质量进行核查；所述传输存储元模型，用于记录所述流数据的输入位置、存储位置、输出位置和/或预设存储时长；所述业务逻辑元模型，用于定义对所述流数据执行的业务逻辑事件及执行所述业务逻辑事件的业务逻辑条件；

根据所述第一元数据，载入所述第一元数据对应的第一流数据；

接收对所述第一流数据的业务逻辑指令，所述业务逻辑指令中携带触发条件及业务逻辑操作；

当所述第一元数据满足所述触发条件时，实现对所述第一流数据的所述业务逻辑操作。

2.根据权利要求1所述的方法，其特征在于，所述根据预设元数据建立模型生成所述第一元数据，包括：

基于预设约束信息设置描述所述流数据的数据结构、记录所述流数据的源地址信息、并定义所述流数据对应的所述业务逻辑操作；

根据所述数据结构、所述源地址信息和所述业务逻辑操作，生成所述第一元数据。

3.根据权利要求2所述的方法，其特征在于，所述根据所述第一元数据，载入所述第一元数据对应的第一流数据，包括：

载入所述源地址信息对应的源地址发送的所述第一流数据。

4.根据权利要求1所述的方法，其特征在于，所述方法还包括：

接收订阅分发模块发送的所述订阅分发指令，所述订阅分发指令中携带所述订阅分发模块对应的至少一个待发送地址信息和预设发送时间；

根据所述第一元数据确定当前系统时间；

当所述当前系统时间到达所述预设发送时间时，将所述第一流数据发送至所述至少一个待发送地址信息，并将所述至少一个待发送地址信息进行存储。

5.根据权利要求1所述的方法，其特征在于，所述业务逻辑操作包括过滤操作、关联操作和聚合操作。

6.根据权利要求1所述的方法，其特征在于，所述方法还包括：

接收对所述第一流数据的删除指令，所述删除指令中携带预设存储时长和删除策略，所述删除策略包括删除所述第一流数据、停止接入所述第一流数据、或删除所述预设存储时长前的所述第一流数据对应的存储数据中的任意一种；

根据所述第一元数据确定所述第一流数据的实际存储时长；

当所述实际存储时长等于所述预设存储时长时，根据所述删除策略进行相应的删除。

7.根据权利要求1所述的方法，其特征在于，所述载入所述第一元数据对应的第一流数据之后，所述方法还包括：

从所述第一流数据中确定与预设待检测信息对应的第一待检测信息；

当所述第一待检测信息与所述预设待检测信息不匹配时，产生告警信息。