[发明专利]一种数据处理方法、装置、介质及设备

说明书

本发明是关于一种数据处理的方法、装置、介质和设备，数据处理的方法包括：接收访问请求，获取访问请求对应的URL；将URL转换为统一格式URL，并根据本区域缓存中是否存在所述统一格式URL对应的缓存对象，响应所述访问请求；或，根据本区域缓存中是否缓存该URL的预设规则，使用所述预设规则对所述URL进行改写形成改写后URL，确定所述改写后的URL的特征值，根据本区域缓存中是否存在所述特征值对应的缓存对象，响应所述访问请求。有效缓解网络的传输带宽，节省带宽资源，减轻源站压力，并降低对缓存空间的占用。

技术领域

本发明涉及云计算领域，尤其涉及一种数据处理方法、装置、介质及设备。

背景技术

在CDN网络中，缓存服务器将用户请求的资源文件进行就近缓存，针对每一个URL，都会缓存一份对应的资源文件，缓存对象与URL一一对应，从而在用户访问URL时，可以将缓存的资源文件快速响应用户的请求，提高用户的访问速度；同样的，在具有缓存功能的数据库或者服务器中，也存在访问地址不同，实际缓存对象相同的情况。这就导致同一缓存对象需要多次回源获取，并在缓存服务器/数据库中缓存多份，造成网络带宽的浪费和磁盘空间的占用。

发明内容

为克服相关技术中存在的问题，本发明提供一种数据处理方法、装置、介质和设备。

根据本申请实施例的一个方面，提供一种数据处理方法，包括：

接收访问请求，获取所述访问请求对应的URL；

将URL转换为统一格式的URL，判断本区域缓存中是否存在统一格式的URL对应的缓存对象，如果存在，使用统一格式的URL对应的缓存对象响应访问请求，如果不存在，回源获取所述URL对应的缓存对象，并响应访问请求；或，

在本区域缓存中查询URL的预设规则，如果本区域缓存中存在URL的预设规则，使用预设规则对URL进行改写形成改写后URL，确定改写后的URL的特征值，判断本区域缓存中是否存在特征值对应的缓存对象，如果存在，使用特征值对应的缓存对象响应访问请求，如果不存在，回源获取URL对应的缓存对象，并响应访问请求。

接收访问请求，获取所述访问请求对应的URL之前，还包括：

获取配置文件，配置文件包括多个不同URL与所述统一格式URL的第一对应关系和/或预设规则。

所述回源获取所述URL对应的资源文件，并响应所述访问请求后，还包括：

存储所述缓存对象，并建立所述统一格式的URL或所述特征值与所述缓存对象存储位置信息的第二对应关系。

数据处理方法还包括：使用所述第二对应关系更新所述配置文件，并将更新后的配置文件同步至本区域内的缓存服务器。

所述使用所述预设规则对所述URL进行改写包括：

使用所述预设规则对所述URL中的参数进行去除，形成改写后的URL。

所述确定所述改写后的URL的特征值包括：

使用信息摘要算法计算所述改写后的URL的特征值。

根据本申请实施例的另一方面，提供一种数据处理的装置，应用于缓存服务器，包括：

请求接收模块，用于接收访问请求，获取请求的URL；

响应模块，所述响应模块用于将所述URL转换为统一格式的URL，判断本区域缓存中是否存在所述统一格式的URL对应的缓存对象，如果存在，使用所述统一格式的URL对应的缓存对象响应所述访问请求，如果不存在，回源获取所述URL对应的缓存对象，并响应所述访问请求；或，