[发明专利]基于大数据的冷热数据分离方法、装置、设备及介质

摘要

本申请提出一种基于大数据的冷热数据分离方法、装置、电子设备及存储介质，基于大数据的冷热数据分离方法包括：实时监控第一数据库集群，移除异常节点以获取第二数据库集群；基于所述第二数据库集群收集数据获得集群冷热数据集；计算所述集群冷热数据集中数据的热度指标，并基于所述热度指标对所述集群冷热数据集进行划分以获取集群热数据集和集群温数据集；分别对所述集群热数据集和集群温数据集进行分片获得热数据分片集和温数据分片集；基于所述热数据分片集和温数据分片集对所述第二数据库集群中的数据进行分离存储。本申请通过综合考虑数据热度以及硬盘的磨损程度来对数据进行分离存储，从而在延长硬盘寿命的同时提高冷热数据的区分效率。