[发明专利]用于缓存数据的方法和装置

说明书

本公开实施例公开了用于缓存数据的方法和装置。该方法的一具体实施方式包括：根据第一用户发送的数据操作请求生成数据操作任务；响应于确定执行数据操作任务的过程中内存数据溢出到作为临时空间的磁盘，根据预先设置的磁盘使用率参数的取值，确定磁盘是否存在使用率限制；响应于确定磁盘存在使用率限制以及磁盘的磁盘空间已满标志的值为假，执行以下操作步骤：确定磁盘的剩余空间的容量是否大于溢出的内存数据的数据量；如果大于，确定磁盘的预测使用率是否大于磁盘使用率参数的取值；响应于确定磁盘的预测使用率不大于磁盘使用率参数的取值，将溢出的内存数据缓存到磁盘。该实施方式提高了数据库的稳定性。

技术领域

本公开实施例涉及计算机技术领域，具体涉及用于缓存数据的方法和装置。

背景技术

磁盘作为最底层的存储介质，对数据库来说是非常重要的，当磁盘空间严重不足时，可能会引起数据库所执行的任务失败，更甚者会引起整个数据库宕机。传统的针对磁盘使用空间问题的解决方案是添加对磁盘使用情况的监控告警：当磁盘空间不足，使用率过高时会发出相应告警通知到运维人员，由运维人员人工介入处理。

通常，引起磁盘空间不足告警的原因主要分为2类：1)真实的数据量、日志存储超限；2)涉及到聚合(aggregation)、表关联(join)、排序(sort)等操作，当内存不足时会缓存数据到磁盘导致磁盘使用率瞬间可达100％，导致整个集群宕掉。针对第一类原因引起的磁盘空间不足告警，往往是可以提前预测的，因此通过扩容、删除历史数据等操作即可避免。针对第二类原因引起的磁盘空间不足告警，往往是不可以提前预测的，因此难以得到有效解决。

发明内容

本公开实施例提出了用于缓存数据的方法和装置。

第一方面，本公开实施例提供了一种用于缓存数据的方法，该方法包括：根据第一用户发送的数据操作请求生成数据操作任务；响应于确定执行上述数据操作任务的过程中内存数据溢出到作为临时空间的磁盘，根据预先设置的磁盘使用率参数的取值，确定上述磁盘是否存在使用率限制；响应于确定上述磁盘存在使用率限制以及上述磁盘的磁盘空间已满标志的值为假，执行以下操作步骤：确定上述磁盘的剩余空间的容量是否大于溢出的内存数据的数据量；如果上述磁盘的剩余空间的容量大于溢出的内存数据的数据量，确定上述磁盘的预测使用率是否大于上述磁盘使用率参数的取值，其中，上述磁盘的预测使用率是根据溢出的内存数据的数据量以及上述磁盘的磁盘已使用空间、磁盘总空间确定的；响应于确定上述磁盘的预测使用率不大于上述磁盘使用率参数的取值，将溢出的内存数据缓存到上述磁盘。

在一些实施例中，上述操作步骤还包括：响应于确定上述磁盘的预测使用率大于上述磁盘使用率参数的取值，针对上述数据操作任务执行任务回滚操作，以及将上述磁盘的磁盘空间已满标志的值设置为真。

在一些实施例中，上述操作步骤还包括：如果上述磁盘的剩余空间的容量不大于溢出的内存数据的数据量，针对上述数据操作任务执行任务回滚操作。

在一些实施例中，上述方法还包括：响应于确定上述磁盘存在使用率限制以及上述磁盘的磁盘空间已满标志的值为真，针对上述数据操作任务执行任务回滚操作。

在一些实施例中，上述方法还包括：响应于针对上述数据操作任务执行任务回滚操作，向上述第一用户所使用的终端发送错误提示信息。

在一些实施例中，上述方法还包括：接收第二用户发送的磁盘使用率参数设置请求，其中，上述磁盘使用率参数设置请求包括第二用户的用户信息和参数值；根据上述第二用户的用户信息，确定上述第二用户是否具有参数设置权限；响应于确定上述第二用户具有参数设置权限，确定上述参数值是否为有效值；响应于确定上述参数值为有效值，将上述参数值作为上述磁盘使用率参数的取值。