[发明专利]一种日志数据管理方法及系统

说明书

技术领域

本发明涉及日志数据处理技术领域，特别是涉及一种日志数据管 理方法及系统。

背景技术

众所周知，日志文件是用于记录系统操作事件的记录文件或文件 集合，操作系统有操作系统日志文件，文件系统有文件系统日志文件， 等等。不同的日志文件记载不同的信息。例如，事务日志文件是数据 库结构中非常重要却又常被忽视的部分。它是用来记录数据库更新情 况的文件，它可以记录针对数据库的任何操作，并将记录的结果保存 到独立的文件中。对于每一次数据库更新的过程，事务日志文件都有 非常全面的记录。根据这些记录可以恢复数据库更新前的状态。

在现有的日志数据管理方法中，当针对目标数据文件发起变更操 作时，在将变更数据写入目标数据文件之前，会将这次变更操作的日 志数据直接写入硬盘中的日志文件，以便需要时从日志文件中读出日 志数据来恢复数据文件，进而保证数据文件的一致性。然而，当频繁 发起变更操作时，需要频繁地访问硬盘来将相应的日志数据写入其中， 而硬盘的读写速度低，这会影响日志数据的写入速度同时频繁地访问 硬盘也会影响整个系统的性能，这是用户不想看到的。

发明内容

有鉴于此，本发明提供了一种日志数据管理方法及系统，以解决 现有技术中当频繁发起变更操作时，频繁访问硬盘降低日志数据写入 速度的问题。

为解决上述技术问题，本发明提供一种日志数据管理方法，该方 法包括：

当检测到针对目标数据文件的变更操作时，将所述变更操作的日 志数据缓存至预设的内存空间；

判断所述内存空间中缓存数据的数据量是否达到预设的转存阈 值；

当判定所述数据量达到所述转存阈值时，将当前所述内存空间中 的所述缓存数据写入硬盘。

上述方法中，优选地，在所述将所述变更操作的日志数据缓存至 预设的内存空间时，还包括：

启动定时器，并开始计时；

在所述判断所述内存空间中缓存数据的数据量是否达到预设的 转存阈值之后，还包括：

当判定所述数据量未达到所述转存阈值且计时达到预设时间阈 值时，将当前所述内存空间中的所述缓存数据写入所述硬盘。

上述方法中，优选地，所述内存空间为非易失性内存空间，该方 法还包括：

当所述非易失性内存空间出现掉电情况并重启时，利用所述非易 失性内存空间中的缓存数据恢复所述目标数据文件中相应的数据。

上述方法中，优选地，在所述将所述变更操作的日志数据缓存至 预设的内存空间之前，还包括：

创建所述非易失性内存空间，并确定所述非易失性内存空间的内 存地址；

所述将所述变更操作的日志数据缓存至预设的内存空间，包括：

根据所述内存地址，查找并定位所述非易失性内存空间；

将所述日志数据缓存至定位到的所述非易失性内存空间。

本发明还提供了一种日志数据管理系统，该系统包括：

缓存单元，用于当检测到针对目标数据文件的变更操作时，将所 述变更操作的日志数据缓存至预设的内存空间；

判断单元，用于判断所述内存空间中缓存数据的数据量是否达到 预设的转存阈值；

写入单元，用于当判定所述数据量达到所述转存阈值时，将当前 所述内存空间中的所述缓存数据写入硬盘。

上述系统中，优选地，还包括：

计时单元，用于在所述将所述变更操作的日志数据缓存至预设的 内存空间时，启动定时器，并开始计时；

所述写入单元还用于在所述判断所述内存空间中缓存数据的数 据量是否达到预设的转存阈值之后，当判定所述数据量未达到所述转 存阈值且计时达到预设时间阈值时，将当前所述内存空间中的所述缓 存数据写入所述硬盘。

上述系统中，优选地，所述内存空间为非易失性内存空间，该系 统还包括：

恢复单元，用于当所述非易失性内存空间出现掉电情况并重启 时，利用所述非易失性内存空间中的缓存数据恢复所述目标数据文件 中相应的数据。

上述系统中，优选地，还包括：

创建单元，用于在所述将所述变更操作的日志数据缓存至预设的 内存空间之前，创建所述非易失性内存空间，并确定所述非易失性内 存空间的内存地址；