[发明专利]一种分布式系统中配置信息的处理方法及系统

说明书

技术领域

本发明涉及分布式大数据处理的技术领域，尤其涉及一种分布式系统中配置信息的处理方法，以及分布式系统中配置信息的处理系统。

背景技术

在信息大爆炸的今天，单机程序或者单服务器程序显然无法应付海量数据的处理和分析。因此，将程序分布式化成了重要的课题。然而程序的分布式化面临的一个最严重的问题是：分布式程序的通信和统一管理问题。

试想一个分布在上百台机器上的应用程序，如果要修改应用程序的配置，例如日志级别、业务参数配置，目前有以下几种方案：

方法一：将配置信息保存在xml文件或者属性文件中。

在参数信息保存在xml或者属性文件中，当需要修改参数时，直接修改xml文件。这样无需重新编译，只需重新部署修改的文件即可。然后对所有的应用进行重新部署。这样做的缺点显而易见，要往上百台机器上重新部署应用，简直是一个噩梦。同时该方案还有一个缺点，就是配置修改无法做到实时生效，修改后往往过一段时间才能生效。

方法二：将配置信息保存在数据库中。

当需要修改参数时，直接修改数据库，然后重启分布式应用程序，或者刷新分布式应用的缓存。尽管这种做法比方法一简单，但却面临着单点失效问题。如果数据库服务器停机，则分布式应用程序的配置信息将无法更新。另外这种方案的配置修改生效实时性虽然比第一种方案好些，但仍然不能达到某些情况下的要求。

发明内容

为克服现有技术的缺陷，本发明要解决的技术问题是提供了一种分布式系统中配置信息的处理方法，其简单、可靠，能够保证及时加载最新的配置信息。

本发明的技术方案是：这种分布式系统中配置信息的处理方法，该方法包括以下步骤：

(1)ZooKeeper服务器集群存储配置信息，在该ZooKeeper服务器集群上创建一个保存数据的节点；

(2)提供一个配置管理的用户界面UI，用户通过UI修改ZooKeeper服务器集群节点上的配置信息；

(3)分布式应用连接到ZooKeeper服务器集群上，监听配置信息的变化；

(4)当配置信息发生变化时，分布式应用更新配置信息，否则保持配置信息。

修改配置信息时，用户通过UI修改ZooKeeper服务器集群节点上的配置信息，无需进行其他任何操作，配置自动生效，因此很简单；ZooKeeper服务集群具有无单点失效的特性，使整个系统更加可靠，即使ZooKeeper集群中的一台机器失效，也不会影响整体服务，更不会影响分布式应用配置信息的更新；ZooKeeper的数据更新通知机制，可以在数据发生变化后，立即通知给分布式应用，能够保证及时加载最新的配置信息。

还提供了一种分布式系统中配置信息的处理系统，该系统包括：

创建模块，其配置来ZooKeeper服务器集群存储配置信息，在该ZooKeeper服务器集群上创建一个保存数据的节点；

用户界面UI，其配置来提供一个配置管理的用户界面UI，用户通过UI修改ZooKeeper服务器集群节点上的配置信息；

监听模块，其配置来将分布式应用连接到ZooKeeper服务器集群上，监听配置信息的变化；

更新模块，其配置来当配置信息发生变化时，分布式应用更新配置信息，否则保持配置信息。

附图说明

图1所示为根据本发明的分布式系统中配置信息的处理方法的流程图。

具体实施方式

如图1所示，这种分布式系统中配置信息的处理方法，该方法包括以下步骤：

(1)ZooKeeper服务器集群存储配置信息，在该ZooKeeper服务器集群上创建一个保存数据的节点；

(2)提供一个配置管理的用户界面UI，用户通过UI修改ZooKeeper服务器集群节点上的配置信息；

(3)分布式应用连接到ZooKeeper服务器集群上，监听配置信息的变化；

(4)当配置信息发生变化时，分布式应用更新配置信息，否则保持配置信息。

修改配置信息时，用户通过UI修改ZooKeeper服务器集群节点上的配置信息，无需进行其他任何操作，配置自动生效，因此很简单；ZooKeeper服务集群具有无单点失效的特性，使整个系统更加可靠，即使ZooKeeper集群中的一台机器失效，也不会影响整体服务，更不会影响分布式应用配置信息的更新；ZooKeeper的数据更新通知机制，可以在数据发生变化后，立即通知给分布式应用，能够保证及时加载最新的配置信息。