[发明专利]一种新型无线电监测大数据并发处理系统

说明书

本发明涉及一种新型无线电监测大数据并发处理系统，包括：负载均衡服务器：负责将传感器的执行任务均衡分配到各传感器控制服务器上，提升传感器控制服务器对于大数据并发处理的执行效率和系统的响应能力；同时提供灾难保障处理，一旦某传感器控制服务器出现故障，可以将该传感器控制服务器正在执行的监测任务动态分配到其它传感器控制服务器来执行。对于更加复杂的监测系统，可以提供备用负载均衡服务器，在主负载均衡服务器出现故障时，可以启用备用负载均衡服务器实现对传感器控制服务器的任务监控和分配。本发明引入多台传感器控制服务来减轻传感器控制服务的压力。提升各传感器控制服务器的执行效率和系统的响应能力。

技术领域

本发明涉及网络大数据处理技术领域，具体指一种新型无线电监测大数据并发处理系统。

背景技术

传统的无线电监测系统主要通过单台传感器控制服务器来控制多个同构节点执行无线电监测任务，Web服务器负责提供用户数据的呈现，并将传感器采集的数据实时存储在数据库服务器中。

传统的部署方式在系统中传感器的数量较少时，这种部署方式可以正常处理用户的监测请求。不过随着无线电监测网络部署的深入，网络中接入的传感器的数量不断的增加并且类型也更多样化，在大量传感器同时执行任务时可能会造成传感器控制服务满负载运行甚至是过负载运行，另外一旦传感器控制服务器出现故障，将会导致所有的传感器无法正常进行任务的执行和数据采集。因此，有必要引入多台传感器控制服务器来分担多传感器任务执行和采集数据的压力。

发明内容

本发明克服现有技术存在的不足，所要解决的技术问题为：提供一种大数据并发处理的负载均衡方法。

为了解决上述技术问题，本发明采用的技术方案为：一种新型无线电监测大数据并发处理系统，包括：

用户：传感器任务的派发者和采集数据的观察者；采用台式电脑，便携式电脑、平板电脑、便携终端设备通过Internet接入无线电监测系统；

传感器：异构节点，由同一设备厂家不同型号的传感器，或者不同设备厂家的传感器构成；

防火墙：作为外部网络和内部网络之间的安全屏障；

服务器交换机：连通不同的服务器；

传感器控制服务器：采用多台传感器控制服务器分别控制传感器的数据收发，具体的传感器由哪台传感器控制服务器来进行控制，是由负载均衡服务器在传感器任务派发时采用负载均衡的算法动态分配的；

负载均衡服务器：负责将传感器的执行任务均衡分配到各传感器控制服务器上，提升传感器控制服务器对于大数据并发处理的执行效率和系统的响应能力；同时提供灾难保障处理，一旦某传感器控制服务器出现故障，可以将该传感器控制服务器正在执行的监测任务动态分配到其它传感器控制服务器来执行。对于更加复杂的监测系统，可以提供备用负载均衡服务器，在主负载均衡服务器出现故障时，可以启用备用负载均衡服务器实现对传感器控制服务器的任务监控和分配；

Web服务器：提供Web客户端网上信息的浏览服务；由于现有的监测用户数有限，采用一台Web服务器来接收用户下发的任务清单，并将传感器采集的数据呈现给用户，随着将来用户数的增多，可以扩展为多台Web服务器和Web负载均衡器；

数据库服务器：实时存储传感器采集的数据，由于数据量较大，采用数据库集群的方式实现。

本发明还提供了上述新型无线电监测大数据并发处理系统的处理方法，包括如下步骤：

步骤1，请求，Web服务器接收客户端发送的数据采集请求；

步骤2，解析请求，将客户端请求解析为不同传感器的任务；

步骤3，负载均衡，由负载均衡服务器根据传感器的类型与任务类型计算任务的负载；将任务依次分配给合适的传感器控制服务器；