[发明专利]数据处理方法、装置及存储介质

权利要求书

1.一种数据处理方法，其特征在于，包括：

将待转储的图片的统一资源定位符URL转换为字符串；根据页面展示需要，为所述图片确定多个目标尺寸；分别将所述字符串和每个目标尺寸结合在一起，得到所述图片对应的多个索引标记；

针对每个索引标记，执行如下处理：

查询分布式缓存中是否保存有与所述索引标记对应的元信息；

如果所述分布式缓存中包含所述索引标记对应的元信息，则将所述元信息发送给内容提供服务器进行保存；

如果所述分布式缓存中不包含所述索引标记对应的元信息，则查询本地磁盘中是否包含以所述字符串为文件名的本地图片；如果查询到所述本地图片，根据所述索引标记对应的目标尺寸对所述本地图片进行裁减压缩，得到目标图片，将所述目标图片上传给内容分发网络。

2.根据权利要求1所述的方法，其特征在于，所述分别将所述字符串和每个目标尺寸结合在一起，得到所述图片对应的多个索引标记包括：

分别将每个目标尺寸附加在所述字符串之后，得到所述多个索引标记。

3.根据权利要求1所述的方法，其特征在于，所述将待转储的图片的统一资源定位符URL转换为字符串包括：

根据散列算法，将所述统一资源定位符URL转换为所述字符串。

4.根据权利要求1所述的方法，其特征在于，进一步包括：

如果所述分布式缓存中不包含所述索引标记对应的元信息，将所述目标图片的元信息以及所述索引标记关联存储到所述分布式缓存。

5.根据权利要求1所述的方法，其特征在于，进一步包括：

如果本地磁盘中不包含以所述字符串为文件名的本地图片，根据所述图片的统一资源定位符URL下载该图片；

根据所述索引标记对应的目标尺寸对所下载的图片进行处理，得到所述目标图片。

6.根据权利要求2所述的方法，其特征在于，进一步包括：

接收网页爬取服务器爬取的网页的超文本标记语言HTML文本；

从所述HTML文本中，获取所述图片的统一资源定位符URL。

7.根据权利要求6所述的方法，进一步包括：

从所述HTML文本中，获取所述网页包含的文字内容；

将所述文字内容发送给所述内容提供服务器，使得所述内容提供服务器将所述文字内容与所述元信息对应保存。

8.根据权利要求1所述的方法，其中，所述元信息以JS对象简谱JSON格式保存在所述分布式缓存中。

9.根据权利要求1所述的方法，其中，所述元信息包括以下一个或者多个：

图片类型、图片大小、宽度、高度、在数据存储服务器中的地址链接、所述统一资源定位符URL、所述元信息存储到分布式缓存的时间。

10.一种数据处理装置，其特征在于，包括：

确定模块，用于将待转储的图片的统一资源定位符URL转换为字符串；根据页面展示需要，为所述图片确定多个目标尺寸；分别将所述字符串和每个目标尺寸结合在一起，得到所述图片对应的多个索引标记；

第一查询模块，用于针对每个索引标记，查询分布式缓存中是否保存有与所述索引标记对应的元信息；

转储模块，用于针对每个索引标记，如果所述分布式缓存中包含所述索引标记对应的元信息，则将所述元信息发送给内容提供服务器进行保存；

第二查询模块，用于针对每个索引标记，如果所述分布式缓存中不包含所述索引标记对应的元信息，则查询本地磁盘中是否包含以所述字符串为文件名的本地图片；

其中，所述转储模块进一步用于，如果所述第二查询模块查询到所述本地图片，根据所述索引标记对应的目标尺寸对所述本地图片进行裁减压缩，得到目标图片，将所述目标图片上传给内容分发网络。