[发明专利]一种文件信息摘要值计算方法及装置

说明书

技术领域

本发明涉及云存储技术领域，特别是涉及一种文件信息摘要值计算方法及装置。

背景技术

随着互联网技术的不断发展以及云计算的崛起，云服务越来越得到普及，在云服务应用中，用户可以将自己的文件上传到云服务端进行管理和保存。

但随着使用用户的不断增加，用户上传的文件也不断增多，云服务端存储的数据量也随之增长。但同时这些上传文件中会存在大量的重复文件，即可能不同用户会上传相同的文件，导致存在冗余文件，这会给云服务端存储带来很大压力，因此需要为云服务端数据进行去重操作。可以利用文件数据的信息摘要值来检查是否存在重复的文件，进行去重操作，文件的信息摘要值具有唯一性。但是，当文件容量较大时，计算信息摘要值的开销和时间会很大，导致处理速度慢。

发明内容

本发明的目的是提供一种文件信息摘要值计算方法及装置，可加快对文件信息摘要值的计算。

为实现上述目的，本发明提供如下技术方案：

一种文件信息摘要值计算方法，包括：

将文件分成容量大小为预设值的多个片段文件；

按照预设规则从所述多个片段文件中选取片段文件进行读取，计算所述文件的信息摘要值。

可选地，所述预设规则为每隔预设数量个所述片段文件，读取一次片段文件。

可选地，所述预设规则为每隔1个所述片段文件，读取一次片段文件。

可选地，还包括：检测文件的容量大小；

所述将文件分成容量大小为预设值的多个片段文件包括：

当所述文件的容量大于阈值时，将所述文件分成容量大小为预设值的多个片段文件。

一种文件摘要值计算装置，包括：

分片模块，用于将文件分成容量大小为预设值的多个片段文件；

计算模块，用于按照预设规则从所述多个片段文件中选取片段文件进行读取，计算所述文件的信息摘要值。

可选地，所述预设规则为每隔预设数量个所述片段文件，读取一次片段文件。

可选地，所述预设规则为每隔1个所述片段文件，读取一次片段文件。

可选地，还包括检测模块，用于检测文件的容量大小；

所述分片模块用于将文件分成容量大小为预设值的多个片段文件包括：

所述分片模块具体用于当所述文件的容量大于阈值时，将所述文件分成容量大小为预设值的多个片段文件。

由上述技术方案可知，本发明所提供的文件信息摘要值计算方法及装置，将文件分成容量大小为预设值的多个片段文件，按照预设规则选取片段文件进行读取，计算所述文件的信息摘要值，以根据文件的信息摘要值检查是否存在重复文件。

本发明文件信息摘要值计算方法及装置，将文件分成多个片段，从中选取片段文件进行读取来计算文件的信息摘要值，与以整个文件来计算文件的信息摘要值方法相比，本方法计算信息摘要值更快，计算时间和计算开销少，实现了加快文件信息摘要值的计算。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例提供的一种文件信息摘要值计算方法的流程图；

图2为本发明实施例提供的一种文件信息摘要值计算装置的示意图。

具体实施方式

为了使本技术领域的人员更好地理解本发明中的技术方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。

请参考图1，本发明实施例提供的一种文件信息摘要值计算方法，包括步骤：

S10：将文件分成容量大小为预设值的多个片段文件；

S11：按照预设规则从所述多个片段文件中选取片段文件进行读取，计算所述文件的信息摘要值。

可以看出，本实施例文件信息摘要值计算方法，将文件分成容量大小为预设值的多个片段文件，按照预设规则选取片段文件进行读取，计算所述文件的信息摘要值，以根据文件的信息摘要值检查是否存在重复文件。