[发明专利]基于流式数据处理的分布式数据采集系统

权利要求书

1.基于流式数据处理的分布式数据采集系统，包括有资金管理平台，其特征在于：所述资金管理平台内配置有若干业务主题库，所述资金管理平台通过Nifi模组连接有调度装置，所述调度装置配置有业务系统、财务数据库、网银接口、软件扩充模组，所述调度装置设置有若干处理模组，所述处理模组包括Jdbc数据源处理器、Sftp文件数据源处理器、本地文件数据源处理器、Rest接口处理器、API接口处理器、Kafka消息处理器、MQTT消息处理器、其他扩展处理器，所述调度装置配置有独立的防火墙模组。

2.根据权利要求1所述的基于流式数据处理的分布式数据采集系统，其特征在于：所述业务主题库能独立加载与更新。

3.根据权利要求1所述的基于流式数据处理的分布式数据采集系统，其特征在于：所述若干处理模组均配置有流程控制器。

4.根据权利要求1所述的基于流式数据处理的分布式数据采集系统，其特征在于：所述调度装置配置有独立的本地存储装置。

5.根据权利要求1所述的基于流式数据处理的分布式数据采集系统，其特征在于：所述业务系统设置有若干相互独立的业务主题库，所述业务主题库拥有抽取功能，所述业务系统配置有预设文件。

6.根据权利要求1所述的基于流式数据处理的分布式数据采集系统，其特征在于：所述财务数据库设有Cdc支撑模组。

7.根据权利要求1所述的基于流式数据处理的分布式数据采集系统，其特征在于：所述软件扩充模组预设有Kafka软件与Rabbit MQ软件。

8.根据权利要求1所述的基于流式数据处理的分布式数据采集系统，其特征在于：所述调度装置中配置有通讯反馈模组与存储库模组。