[发明专利]一种结构化海量实时数据的动态存储优化方法

摘要

本发明公开了一种结构化海量实时数据的动态存储优化方法，它包括：设定数据甄别规范和时间阈值；读取数据；筛选并标记数据；建立动态双缓存区；对动态缓冲区中的数据建立混合索引；将动态缓存区中小于时间阈值的数据存入到动态实时数据库中；若动态缓存区中的数据超过时间阈值，将超过时间阈值的数据存入到关系型历史数据库中；将实时数据库中超过时间阈值的内存索引与硬盘索引合并；索引合并后，将实时数据库中的数据存入到关系型历史数据库中。本发明取得的有益效果是：能够在接收数据时，采用双缓冲区交替接收实时数据，或对实时数据进行处理后可以不间断的接收实时数据，使内存效率达到最大，降低了接收数据的延迟性。