[发明专利]数据访问请求的处理方法、装置和设备及存储介质

摘要

本发明公开了一种数据访问请求的处理方法、装置和设备及存储介质，属于计算机技术领域，用于解决现有技术中用于批量处理的分布式缓存的资源开销较大的问题。该方法包括：截获到请求获取应用数据段的数据访问请求时，生成至少一个数据访问子请求；对于每个数据访问子请求，根据预设规则从分布式批量处理系统中所有可用的节点中筛选出M个节点并从中选择一个目标节点，将数据访问子请求发送给选择出的目标节点；接收选择出的目标节点返回的数据块，其中，如果目标节点中储存有上述数据块的只读副本，则从本地缓存中获取并发送，否则，从外部存储系统获取后，保存后并发送；将收到的至少一个数据块组合成应用数据段并发送给数据访问请求的发送方。

主权项

1.一种数据访问请求的处理方法，其特征在于，所述方法包括：截获到请求获取应用数据段的数据访问请求时，生成至少一个数据访问子请求，每个数据访问子请求分别用于获取所述应用数据段中的一个数据块；分别根据每个数据访问子请求所要获取的数据块，执行如下步骤：根据预设规则从分布式批量处理系统中所有可用的节点中筛选出M个节点，其中M为正整数；从所述M个节点中选择一个目标节点；并将数据访问子请求发送给选择出的目标节点；接收选择出的目标节点返回的数据块，其中，目标节点在收到数据块访问子请求时，如果本地缓存中储存有数据访问子请求所要获取的数据块的只读副本，则从本地缓存中获取并发送，否则，从外部存储系统获取后，保存到本地缓存中并发送；将收到的至少一个数据块组合成所述应用数据段并发送给数据访问请求的发送方。