[发明专利]数据库控制方法及控制系统

说明书

本申请一种数据库控制方法及控制系统，涉及数据业务相关技术领域。主流平台常用的数据压缩技术受操作系统限制，多操作系统之间不能互相兼容。本申请包括如下步骤：S1：数据读取模块对配置数据库、基础数据库内的数据项依次逐个读取，得到元数据项；S2：数据采集模块对所述数据读取模块读取的所述数据项进行选择性采集，对符合预设要求的所述数据项采集；S3：数据压缩模块对所述数据采集模块采集的符合预设要求的数据项进行压缩形成数据块；S4：对步骤S3中进入缓存池内的符合预设要求的数据块经过再次压缩，形成压缩文件。本申请克服现有国产操作系统和芯片性能不足，提供了基于国产操作系统的实时数据接收、压缩、存储、查询一体化处理平台。

技术领域

本申请涉及数据业务相关技术领域，具体涉及一种数据库控制方法及控制系统。

背景技术

实时数据库软件是指在基于实时操作系统，能独立运行的一种数据库控制方法及控制系统，用以处理大量的、时效性强且有严格时序的数据，以高可靠、高时效为目标。

实时数据，其具有以下特征：

数据变化具有一定波形规律；

高并发、高采样率；

数据中只有小部分测点的值经常发生改变；

数据中很多测点的数值都具有慢变化的特征；

数值变化与时间变化具有共同变化特性；

用户在一定范围内，能够允许数据的精度损失；

数据具有标签、指标和时间戳三元素。

基于实时操作系统的数据库大多被国外垄断，国内市场上缺少成熟的基于实时国产操作系统的数据库产品。目前，行业内普遍应用的实时数据库管理系统都属于内存数据库，如果应用层任务对内存操作不当，容易引起系统崩溃。主流平台常用的数据压缩技术受操作系统限制，多操作系统之间不能互相兼容。

发明内容

本申请提供一种数据库控制方法及控制系统，以解决行业内普遍应用的实时数据库管理系统都属于内存数据库，如果应用层任务对内存操作不当，容易引起系统崩溃。主流平台常用的数据压缩技术受操作系统限制，多操作系统之间不能互相兼容。数据查询也受操作系统限制的问题。

为达上述目的，本申请提供的一种数据库控制方法，包括如下步骤：

S1：数据读取模块对配置数据库、基础数据库内的数据项依次逐个读取，得到元数据项，每读取一个则进入步骤S2；

S2：数据采集模块对所述元数据项进行选择性采集，如果所述元数据项符合预设采集要求，则将所述元数据项进行采集，得到采集数据项，进入步骤S3，如果所述元数据项不符合预设采集要求，则将所述元数据项进行舍弃，返回步骤S1读取下一个数据项，直至所有的数据项全部结束；

S3：数据压缩模块对所述采集数据项进行选择压缩，如果所述采集数据项符合预设压缩要求，则将所述采集数据项进行压缩形成数据块，进入步骤S4，如果所述采集数据项不符合预设压缩要求，则将所述采集数据项进行舍弃，返回步骤S1读取下一个数据项，直至所有的数据项全部结束；

S4：缓存池对所述数据块进行选择存储，如果所述数据块符合预设存储要求，则将所述数据块进行再次压缩，形成压缩文件，然后进行存储，如果所述数据块不符合预设存储要求，则将所述数据块舍弃，返回步骤S1读取下一个数据项，直至所有的数据项全部结束。

在本申请的一些实施例中，所述数据压缩模块对所述采集数据项进行选择压缩，是采用旋转门压缩算法。

在本申请的一些实施例中，所述旋转门压缩算法参数包括压缩偏差，所述压缩偏差是绝对误差值，依据经验设定；在绝对误差值范围内，数据项被压缩；在绝对误差值范围外，数据项不能压缩。