[发明专利]一种PostgreSQL云存储归档调度系统

说明书

技术领域

本发明涉及云存储归档调度技术领域，尤其涉及一种预写式日志文件PostgreSQL云存储归档调度技术，具体涉一种PostgreSQL云存储归档调度系统。

背景技术

PostgreSQL提供了基于时间点的恢复（PITR）功能，通过PITR，PostgreSQL可以恢复到从基础备份时刻到最终状态时刻之间的任意时间点，这个功能的实现依赖于预写式日志文件（WAL）的连续性归档，以及数据库的基础备份。连续性归档是指不能遗漏任何一个预写式日志文件的备份。根据云存储PostgreSQL数据库对预写式日志文件归档调度的活跃程度， PostgreSQL数据库产生预写式日志文件(WAL)的频度各不相同，而且在PostgreSQL数据库上面承载的业务量的变化也会导致PostgreSQL据库产生预写式日志文件（WAL）的频度发生巨大变化。

传统的云存储PostgreSQL数据库预写式日志文件（WAL）归档为分散管理，即每个PostgreSQL数据库维护各自的归档操作，缺点是无法合理利用归档存储资源，要么被浪费要么不够用。归档的操作日志分散，不适合接入统一的监控系统，难以预估未来存储的需求。

传统的云存储PostgreSQL数据库预写式日志文件（WAL）归档，存储上存在着单点故障问题，在给PostgreSQL数据库分配归档存储空间的时，要么备份空间利用率低下，要么备份空间不够，WAL文件归档失败的概率较高，PostgreSQL WAL文件归档失败将导致该WAL文件无法循环使用，长久下去将导致目录溢出（PG_XLOG），数据库崩溃（PANIC SHUTDOWN）等。

传统的云存储PostgreSQL数据库预写式日志文件（WAL）归档存储存在扩展性差、收缩性差、不能合理利用互联网数据中心（IDC）的零散存储等缺点。

传统的云存储PostgreSQL数据库预写式日志文件（WAL）归档，在文件存储路径时，需要对归档文件路径进行重新配置变更，并要修改备份程序，非常容易出错，如果备份的节点数越多，那么对维护工作的压力就越大。并且数据库个数越多维护越复杂，更不方便控制历史版本。  

传统的云存储PostgreSQL数据库预写式日志文件（WAL）归档，日志文件是记录在各自的数据库服务器上，如果需要还原WAL文件需要翻阅归档日志，文件型的归档日志检索麻烦，同时输出统一的归档统计报告比较复杂。 

因此，对云存储PostgreSQL数据库预写式日志文件（WAL）归档，需要采用统一调度系统来满足云存储中多节点的统一管理，统一监控，归档存储冗余管理，归档存储可平滑扩缩管理。

中国专利公开号CN 102130959A ，公开日是2011年07月20日，名称为“一种实现云存储资源调度的系统及方法”的方案中公开了一种实现云存储资源调度的系统及方法。它包括多个存储服务器用于每隔一段时间将本服务器的存储资源信息通过分布式对象缓存接口反馈给分布式缓存服务器;分布式缓存服务器用于保存各个存储服务器反馈的存储资源信息。不足之处是，这种云存储资源调度的系统及方法，难于对云存储中多节点进行统一管理和监控，难于对归档存储冗余进行管理，归档存储可平滑扩缩性差，不能克服单点故障，扩展性差、收缩性差、不能合理利用互联网数据中心的零散存储空间。

发明内容

本发明是为了解决现有云存储资源调度系统，存在对云存储中多节点没有进行统一管理和监控，归档存储冗余管理难，归档存储可平滑扩缩性差，不能克服单点故障，扩展性差，收缩性差，不能合理利用互联网数据中心的零散存储空间的这些不足，的提供一种采用统一调度系统来满足云存储中多节点的统一管理，统一监控，归档存储冗余管理简单，归档存储可平滑扩缩管理效果好一种PostgreSQL云存储归档调度系统。

为了实现上述目的，本发明采用以下技术方案：