[发明专利]海量日志写入数据库的方法、装置和日志容灾系统

摘要

本发明公开了一种海量日志写入数据库的方法、装置和日志容灾系统，以在日志产生装置产生大量日志时减小日志入库的丢失率。所述方法包括：将日志产生装置生成并通过接口服务器发送的日志写入缓冲区进行缓存；从缓冲区读取日志；按照顺序写磁盘的操作方式将读取的日志保存至数据库。由于日志在写入数据前可在缓冲区进行缓存，由此可以减轻在网络I/O速度较大时日志入库的写磁盘压力，另一方面，在从缓冲区读取日志后，是按照顺序写磁盘的操作方式将日志保存至数据库，由于顺序写磁盘的速度远远大于随机写磁盘的速度，因此，本发明提供的日志入库时写磁盘的方式大大提高了日志写入数据库的速度，减小了网络I/O速度较大时导致的日志入库的丢失率。

主权项

1.一种海量日志写入数据库的方法，其特征在于，所述方法包括：将日志产生装置生成并通过接口服务器发送的日志写入缓冲区进行缓存；从所述缓冲区读取所述日志；按照顺序写磁盘的操作方式将所述读取的日志保存至数据库；其中，所述缓冲区为环状缓冲区；所述从所述缓冲区读取所述日志包括：若H+N<K，则将所述环状缓冲区的第H字节至第H+N－1字节的日志内容导出，所述H为所述环状缓冲区当前头部对应的字节所在的序号，所述N为单条数据所占字节数，所述K为所述环状缓冲区的大小，量纲为字节；若H+N≥K，则读取所述环状缓冲区的第H字节至第K－1字节以及第0字节至第N－1－K+H字节的日志内容。