[发明专利]一种网管时序文件并发处理系统及并发处理方法

摘要

本发明公开了一种网管时序文件并发处理系统，涉及网管文件处理领域，包括网管设备，数据文件夹创建模块，数据文件夹管理模块，数据文件接收管理模块和数据文件处理管理模块。本发明通过多进程、多线程处理机制，根据用户预先设定的数据文件的进程数，线程数，计算线程数，制定不同的物理硬盘资源使用策略，提高了网管系统管理设备运行效率并节省系统资源，避免了多文件读写处理的性能瓶颈，使得网管系统管理设备的处理性能和扩展性进一步提升。本发明公开了一种基于网管时序文件并发处理系统的网管时序文件并发处理方法。

主权项

1.一种网管时序文件并发处理系统，其特征在于，其包括：网管设备(1)、数据文件夹创建模块(2)、数据文件夹管理模块(3)、数据文件接收管理模块(4)和数据文件处理管理模块(5)；所述网管设备(1)，用于上传包含设备状态的数据文件；所述数据文件夹创建模块(2)，其根据用户设定的进程数为每个数据文件处理进程创建一个根文件夹，并根据用户设定的进程数为每个数据文件处理进程创建一个数据库；所述数据文件夹管理模块(3)，其根据用户设定的进程数定时检查每个数据文件处理进程的根文件夹是否存在，如果不存在，则创建根文件夹；所述数据文件夹管理模块(3)判断当前日期的子文件夹是否存在，如果不存在，则创建日期子文件夹；所述数据文件夹管理模块(3)判断超过用户设定的保留天数的文件夹是否存在，如果存在，则删除；所述数据文件接收管理模块(4)，其根据网管设备(1)标识在当前日期的子文件夹下进一步创建设备标识子文件夹，并接收网管设备(1)发送来的数据文件并在标识子文件夹下创建时标文件，再发送时标文件的文件名至数据文件处理管理模块(5)；所述数据文件处理管理模块(5)，其根据用户设定的工作线程总数和计算线程总数并发启动多个工作线程和多个计算线程；所述数据文件处理管理模块(5)根据数据文件接收管理模块(4)发送的文件名读取文件并将文件中的数据写入内存；所述数据文件处理管理模块(5)将内存中的数据写入数据文件夹创建模块(2)创建的数据库，同时根据具体的计算逻辑对内存中的数据进行处理；其中，所述网管设备(1)发送至所述数据文件接收管理模块(4)的数据文件需经过压缩算法进行处理后，再保存为所述时标文件。