[发明专利]一种数据采集器故障解决方法

说明书

本发明提供了一种数据采集器故障解决方法，数据采集器启动后，如果数据采集器发生故障；控制中心选举出处于在线状态其他一个数据采集器进行故障处理；控制中心下发故障处理通知给故障处理数据采集器进行故障处理，故障处理数据采集器收到故障处理通知后，进行故障处理：故障处理数据采集器查询故障数据采集器所链接的数据源，并将这些数据源分配给处于正常工作状态的数据采集器进行数据采集；分配完成后将数据源的分配方式发送给控制中心；数据采集器定时检测数据库中是否新分配了数据源，如果有，则启动数据采集线程进行数据采集。本发明解决了数据采集器单点故障后，导致数据采集的严重滞后，甚至导致数据丢失的后果。

技术领域

本发明涉及一种数据采集器故障解决方法，特别是涉及一种适用于拉取型数据采集器的采集器故障解决方法。

背景技术

目前拉取型数据采集器（拉取型数据采集器是指数据采集器主动向数据源拉取数据，拉取方式可以是访问数据源的数据库或者通过其他通讯方式拉取数据。）大多数故障后无法自动恢复或者数据源无法由其他数据采集器接替，这样势必导致数据采集的严重滞后、甚至导致数据丢失等后果。

发明内容

本发明要解决的技术问题是提供一种解决数据采集器单点故障后，导致数据采集的严重滞后，甚至导致数据丢失等后果的，数据采集器故障解决方法；

本发明第二个要解决的技术问题是在保证数据采集器单点故障问题解决的基础上，将数据采集器的数据源的采集工作自动均衡到其他采集器上的自动均衡方法；

本发明第三个要解决的技术问题是提供一种便于故障问题原因排查的方法。

本发明采用的技术方案如下：一种数据采集器故障解决方法，具体方法为：数据采集器启动后，链接相应数据源进行数据采集，每隔一个设定时间阈值T1向数据库更新与数据源链接的心跳时间，只要心跳时间不超出所设定的时间距离阈值T2，则说明数据采集器在正常工作；

同时，数据采集器与控制中心以socket通讯方式建立TCP长连接，建立连接后，登录到控制中心，登录时上传数据采集器的ID，并向控制中心汇报与该数据采集器链接的所有数据源ID，登录成功后，数据采集器每隔一个设定时间阈值T3向控制中心报送数据采集器运行的心跳时间，只要心跳时间不超出所设定的时间距离阈值T4，则说明数据采集器正常工作并且控制中心和数据采集器的网络是畅通的；

如果控制中心发现T4时间内某一数据采集器没有上报数据采集器运行的心跳时间或者与控制中心已经断开长链接，则说明该数据采集器有可能发生故障；控制中心选举出处于在线状态其他一个数据采集器作为进行故障处理的故障处理数据采集器；

控制中心下发故障处理通知给所述故障处理数据采集器进行故障处理，所述故障处理数据采集器收到故障处理通知后，进行故障处理：所述故障处理数据采集器从其所对应的数据库中，查询发生故障的故障数据采集器所链接的数据源，并将这些数据源分配给处于正常工作状态的数据采集器进行数据采集；分配完成后所述故障处理数据采集器向控制中心汇报故障已经处理，并将数据源的分配方式发送给控制中心；

被分配了数据源的数据采集器定时检测数据库中是否新分配了需要采集的数据源，如果发现有新分配的数据源，启动数据采集线程进行数据采集。

选举故障处理数据采集器时，只要按照设定的选举规则，从在线正常工作状态的数据采集器中能唯一选举出一个数据采集器，作为故障处理数据采集器即可。

由于待分配的数据源的分配工作只是更新所述其所对应的数据库中数据采集器和数据源的对应关系，因此，还需要分配完成后，各个在线数据采集器查询需要采集的数据源，启动与对应待采集数据源的数据采集线程，完成数据源采集工作。

本发明方案解决了数据采集器单点故障后，导致数据采集的严重滞后，甚至导致数据丢失等后果。