[发明专利]一种高效数据管理方法及系统

说明书

技术领域

本发明涉及一种数据管理方法，具体地说，是涉及一种在轨道交通领域中对于关键数据的保存以及对历史数据的分析、统计、提取方法。

背景技术

在轨道交通技术领域中，随着地铁线路的增加、轨道交通行业各个子系统机电设备的数量也在增长，因此，轨道交通监控系统中需要监控的设备在不断增多，以及需要保存、统计、提取的数据量也在不断膨胀，如何在不增加硬件成本的同时，保证历史数据的准确、高效的保存、统计以及提取成为了我们必须解决的问题。

发明内容

本发明针对现有轨道交通采集数据保存、统计以及提取的问题，提出了一种高效管理方法，更加适用于管理现在轨道交通中越来越多的数据，极大的提高了效率。

为了解决上述技术问题，本发明采用以下技术方案予以实现：

一种高效数据管理方法，包括以下步骤：

（1）、配置数据的保存和统计方式，并保存配置参数；

（2）、对于需要保存的数据，按照配置的保存方式进行保存；

（3）、对于还需要进行统计的数据，按照配置的统计方式，基于所保存的历史数据进行统计计算；统计计算步骤在服务器空闲时执行。

进一步的，所述的保存方式包括数据变化激活保存和定时激活保存两种保存方式，所述定时激活保存的配置参数包括：定时激活保存的时间间隔；所述数据变化激活保存的配置参数包括：最大值Max，最小值Min，最小变化百分比A，以及最大记录间隔L，其中，Max＞Min， A、L均为正数。

又进一步的，所述统计方式的配置参数包括：

按照统计时间包括:按小时、天、周、月、季度、年进行统计；

按照统计类型包括：按最大值、最小值、平均值、变化次数进行统计。

再进一步的，所述变化激活保存和定时激活保存所激活的保存步骤为：首先判断是否存在最后一次记录数据，若否，则直接记录本次数据以及更新最后记录数值和时间；若是，则根据本次数据与最后一次记录数据的关系和/或本次记录时间与最后一次记录时间的差值与最大记录间隔的关系，确定是否记录本次数据以及更新最后记录数值和时间。

由于需要保存或统计的数据包括模拟量和开关量两种类型，所述的本次数据与最后一次记录数据的关系包括：对于开关量类型的数据，直接比较本次数据与最后一次记录数据的大小关系；对于模拟量类型的数据，比较本次数据和最后一次记录数据之间的差值与阈值T之间的关系，其中，阈值T通过以下方式获得：

T=（Max-Min）×A。

其中，模拟量数据统计方式的配置参数包括，首先从按照统计时间的分类中选择一种或多种，然后从按照统计类型的分类中选择按照变化次数进行统计。

开关量数据统计方式的配置参数包括，首先从按照统计时间的分类中选择一种或多种，然后从按最大值、最小值、平均值中选择一种或多种。

本发明同时公开了一种高效数据管理系统，包括：

参数配置模块，用于配置保存方式和统计方式，以及配置各方式的参数；

存储模块，用于存储各配置参数以及用于存储采集和统计的数据；

执行模块，用于按照配置参数将采集数据进行保存和/或统计计算。

与现有技术相比，本发明的优点和积极效果是：本发明的高效数据管理方法针对不同业务需求的历史数据的保存方式、时间粒度、统计方式进行灵活配置，有效的减小了没必要的开销，同时在历史保存时剔除冗余数据以提高效率，基于历史数据分摊统计开销提高效率，以及增加了本地缓存、过滤、补齐历史查询数据功能，使系统更加实用、完善。

结合附图阅读本发明实施方式的详细描述后，本发明的其他特点和优点将变得更加清楚。

附图说明

图1是本发明所提出的一种高效数据管理方法的一种实施例参数配置流程图；

图2是本发明所提出的一种高效数据管理方法的一种实施例的保存过程流程图；

图3是本发明所提出的一种高效数据管理方法的一种实施例的一种统计方式流程图；

图4是本发明所提出的一种高效数据管理方法的一种实施例的一种制作趋势图流程图。

具体实施方式

下面结合附图对本发明的具体实施方式作进一步详细地说明。

实施例一，本实施例的一种高效数据管理方法，包括以下步骤：

（1）、配置数据的保存和统计方式，并保存配置参数；

（2）、对于需要保存的数据，按照配置的保存方式进行保存；