[发明专利]一种基于RAC的数据库日志文件读取方法和装置

说明书

本发明涉及数据库领域，特别是涉及一种基于RAC的数据库日志文件读取方法和设备。其中主要步骤包括：将需读取的日志文件分为连续的数据片；创建至少2个日志读取线程；根据日志读取线程的数量计算每个日志读取线程需读取的日志文件起始日志块偏移值，根据日志块偏移值为每个日志读取线程分配需读取的数据块；启动所有日志读取线程对日志文件并行读取，直至将被分配的需读取的数据块读取完成；将读取到的数据块按照原日志文件中的顺序合并为读取到的数据片；对待读取的日志文件中的每一个数据片依次进行读取，直至日志文件读取完成。本发明采用解决日志文件读取速度限制问题，通过并行读取提高了单位时间内的读效率，整体缩短了日志文件读取时间。

【技术领域】

本发明涉及数据库领域，特别是涉及一种基于RAC的数据库日志文件读取方法和装置。

【背景技术】

Oracle数据库的真正应用集群(Real Application Cluster，简写为RAC)作为ORACLE的一种重要数据库部署方案，在各个场景中的应用是非常广泛的。在数据库数据同步领域，同样需要RAC的数据库数据同步方法。自动存储管理(Automatic StorageManagement，简写为ASM)是ORACLE数据库的一个特性，它为数据库管理员提供了一个在所有服务器和存储平台上均一致的简单存储管理接口，基于RAC的数据库也需要使用ASM进行日志文件的读取。

ASM并非通用的文件系统，只能用于Oracle数据文件、重做日志以及控制文件。在分析ASM上的归档日志时，由于ASM文件读取的限制，单线程获取归档时，最大一次读取容量必须小于32K，使用单线程时读取速度限制在2M/S左右。因此，目前普遍使用的单线程日志文件读取方法在某些情况下会形成日志归档、分析功能的瓶颈。

鉴于此，如何克服该现有技术所存在的缺陷，避免基于RAC的ORACLE数据库中日志文件读取时由于读取容量限制必须多次申请IO导致的读取速度较慢的现象，提高日志文件读取效率，是本技术领域亟待解决的问题。

【发明内容】

针对现有技术的以上缺陷或改进需求，本发明解决了基于RAC的数据库日志文件读取较慢的问题。

本发明实施例采用如下技术方案:

第一方面，本发明提供了一种基于RAC的数据库日志文件读取方法，包括：将需读取的日志文件分为连续的数据片，每一个数据片的小于等于预设阈值；创建至少2个日志读取线程，日志读取线程数量小于等于每个数据片中包含的日志块数量；根据日志读取线程的数量计算每个日志读取线程需读取的日志文件起始日志块偏移值，根据日志块偏移值为每个日志读取线程分配需读取的数据块，每个数据块包含至少一个日志块；

启动所有日志读取线程，按照被分配的需读取的日志块偏移值对日志文件并行读取，直至将被分配的需读取的数据块读取完成；将每个日志读取线程读取到的数据块按照原日志文件中的顺序合并为读取到的数据片；对待读取的日志文件中的每一个数据片依次进行读取，直至日志文件读取完成。

优选的，将每个日志读取线程读取到的数据块按照原日志文件中的顺序合并为读取到的数据片之前，还包括：创建读取管理线程，日志读取管理线程获取日志文件读取请求、完成日志文件读取过程中的计算任务，并对日志读取线程进行管理，计算任务包括将需读取的日志文件分为连续的数据片、计算每个日志读取线程需读取的日志文件起始日志块偏移值、将每个日志读取线程读取到的数据块按照原日志文件中的顺序合并为读取到的数据片。

优选的，还包括：进行日志文件读取前，日志读取管理线程判断需读取的日志文件是否已被读取；若是，不进行日志读取；若否，开始进行日志读取。

优选的，将每个日志读取线程读取到的数据块按照原日志文件中的顺序合并为读取到的数据片之前，还包括：建立日志缓存区，日志缓存区的大小不小于划分后的数据片大小，且以日志块大小为标准对齐内存地址，以便于存放日志读取线程所读取到的数据块。