[发明专利]数据的读取方法、装置和计算机存储介质在审
申请号: | 202010037801.0 | 申请日: | 2020-01-14 |
公开(公告)号: | CN113126886A | 公开(公告)日: | 2021-07-16 |
发明(设计)人: | 徐佳宏;李银;贾晔;李威青;刘彬;刘勇 | 申请(专利权)人: | 深圳市茁壮网络股份有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 深圳市深佳知识产权代理事务所(普通合伙) 44285 | 代理人: | 常忠良 |
地址: | 518004 广东省*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 读取 方法 装置 计算机 存储 介质 | ||
本申请提供一种数据的读取方法、装置和计算机存储介质,收到终端设备的数据读取请求后,若目标数据存储于缓存硬盘集群,确定缓存硬盘集群的当前网络延迟,并判断当前网络延迟是否大于预设的第一延迟阈值;若当前网络延迟小于或等于第一延迟阈值,通过缓存硬盘服务器从缓存硬盘集群读取目标数据并转发目标数据至终端设备。在允许的网络延迟范围内,本方案对于所有的数据读取请求均直接从缓存硬盘集群读取目标数据,从而减少机械硬盘集群的被访问次数,达到延长机械硬盘使用寿命的效果。
技术领域
本发明涉及计算机技术领域,特别涉及一种数据的读取方法、装置和计算机存储介质。
背景技术
随着互联网技术的发展,目前出现了一种基于网络的分布式文件系统。分布式文件系统设置有缓存硬盘集群(包括多个固态硬盘)和对应的缓存硬盘服务器,以及机械硬盘集群(包括多个机械硬盘)和对应的机械硬盘服务器。
客户端需要读取数据时,将数据读取请求发送至数据模块,数据模块会比对缓存硬盘服务器当前的数据传输速率和机械硬盘服务器当前的数据传输速率,通过其中数据传输速率较低的服务器从对应的硬盘集群读取数据并发送至客户端。
基于现有的方法,缓存硬盘集群被访问的频率和机械硬盘集群被访问的频率基本一致。机械硬盘允许的最大被访问次数远小于固态硬盘所允许的最大被访问次数,因此,现有技术中分布式文件系统中的机械硬盘的使用寿命较短,需要频繁的更换新的机械硬盘。
发明内容
基于上述现有技术的缺点,本申请提供一种数据的读取方法,以解决现有的读取方法导致的分布式文件系统中的机械硬盘的使用寿命较短的问题。
本申请第一方面提供一种数据的读取方法,包括:
接收终端设备的数据读取请求;
若目标数据存储于缓存硬盘集群,确定缓存硬盘集群的当前网络延迟;其中,所述目标数据指代满足所述数据读取请求的数据;
判断所述当前网络延迟是否大于预设的第一延迟阈值;
若所述当前网络延迟小于或等于所述第一延迟阈值,通过所述缓存硬盘服务器从所述缓存硬盘集群读取所述目标数据;
将所述目标数据反馈至所述终端设备。
可选的,所述判断所述当前网络延迟是否大于预设的第一延迟阈值之后,还包括:
若所述当前网络延迟大于所述第一延迟阈值,根据预设的网络延迟和读取频率的对应关系,确定所述当前网络延迟对应的理论读取频率;
计算历史读取记录中从缓存硬盘集群读取目标数据的历史数据读取请求所占的比例,得到历史读取频率;其中,所述历史读取记录有在当前的数据读取请求之前收到的K个历史数据读取请求以及为每一个历史数据读取请求提供目标数据的硬盘集群;所述K是预设的正整数;
判断所述历史读取频率是否大于所述理论读取频率;
若所述历史读取频率大于所述理论读取频率,通过机械硬盘服务器从机械硬盘集群读取所述目标数据;
若所述历史读取频率小于或等于所述理论读取频率,通过所述缓存硬盘服务器从所述缓存硬盘集群读取所述目标数据。
可选的,所述确定缓存硬盘集群的当前网络延迟,包括:
按接收请求的时间顺序,从当前的数据读取请求开始依次获取之前的N个数据读取请求对应的历史网络延迟;其中,每一个数据读取请求均对应于一个历史网络延迟,所述历史网络延迟,指代从所述缓存硬盘集群中读取满足对应的数据读取请求的部分或全部数据时所述缓存硬盘集群的网络延迟;所述N是预设的正整数;
计算获取的N个历史网络延迟的平均值,得到缓存硬盘集群的当前网络延迟。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市茁壮网络股份有限公司,未经深圳市茁壮网络股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010037801.0/2.html,转载请声明来源钻瓜专利网。
- 上一篇:电力传输系统
- 下一篇:数据采样电路、数据采样装置
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置