[发明专利]一种数据缓存方法、装置、设备及介质

说明书

本发明公开了一种数据缓存方法、装置、设备及介质，方法包括：响应于空间分配请求，对固定区域磁盘空间进行预分配，确定内存块缓冲区；响应于数据写入请求，将第一数据循环写入所述内存块缓冲区或所述磁盘；响应于数据读取请求，从所述内存块缓冲区或所述磁盘中循环读取第二数据。本发明提高了数据缓存的效率，可广泛应用于数据缓存技术领域。

技术领域

本发明涉及数据缓存技术领域，尤其是一种数据缓存方法、装置、设备及介质。

背景技术

随着通信网络的不断发展和用户规模的不断扩大。往往需要较大的缓存空间作为部分临时数据存储区。由于内存造价成本较高，容量相对有限。在内存资源有限时需要对这段时间内海量数据缓存到磁盘中。对这类型的数据处理时，经常需要处理每秒几百兆到几千兆的数据。这些数据需要快速缓存到磁盘中，而磁盘设备存储空间一般相对固定。而且网络恢复后还需要快速读取存储区内容。随着网络迭代速度加快，如何高效快速的利用固定磁盘空间缓存数据变成很值得思考解决的问题。

发明内容

有鉴于此，本发明实施例提供一种高效的数据缓存方法、装置、设备及介质。

本发明的第一方面提供了一种数据缓存方法，包括：

响应于空间分配请求，对固定区域磁盘空间进行预分配，确定内存块缓冲区；

响应于数据写入请求，将第一数据循环写入所述内存块缓冲区或所述磁盘；

响应于数据读取请求，从所述内存块缓冲区或所述磁盘中循环读取第二数据。

可选地，所述响应于空间分配请求，对固定区域磁盘空间进行预分配，确定内存块缓冲区，包括：

输入设置参数路径创建目录和缓存文件；

根据预设值创建预设大小的磁盘文件,作为高速缓存的存储区；

通过open64函数接口创建文件写描述符和读描述符；

创建内存写缓冲区和内存读缓冲区。

可选地，所述创建内存写缓冲区和内存读缓冲区，包括：

调用getpagesize函数获取内存页大小；

通过posix_memalign函数对内存写缓冲区和内存读缓冲区进行对齐；

配置所述内存写缓冲区的文件写偏移位置；

配置所述内存读缓冲区的文件读偏移位置。

可选地，所述响应于数据写入请求，将第一数据循环写入所述内存块缓冲区或所述磁盘，包括：

根据所述数据写入请求，根据所述第一数据构建内置存储结构作为写入请求数据块；

对于同一循环内的数据写入，则判断写入数据块总长度与文件写偏移位置的和是否小于总的存储空间大小，若是，则调用磁盘存储控制模块-写入请求处理单元，写入请求数据块；反之，则调用磁盘存储控制模块-刷写内存缓存处理单元，同步磁盘写入数据。

可选地，所述响应于数据写入请求，将第一数据循环写入所述内存块缓冲区或所述磁盘，还包括：

对于非同一循环内的数据写入，判断写入数据块总长度与文件写偏移位置之和是否小于文件读偏移位置，若是则用磁盘存储控制模块-写入请求处理单元，写入请求数据块。

可选地，所述响应于数据读取请求，从所述内存块缓冲区或所述磁盘中循环读取第二数据，包括：

根据所述数据读取请求，判断是否有待读取的第二数据，若是，则执行下一步骤；

向内存中写入缓存数据；

读取所述缓存数据。