[发明专利]一种传输数据的方法和系统

权利要求书

1.一种传输数据的方法，其特征在于，所述方法包括：

发送服务器对待发送的目标数据按字节计算哈希值，筛选符合预设取值条件的目标哈希值，确定所述目标哈希值对应的数据内容，并基于所述数据内容确定所述目标数据的内容切割点；

所述发送服务器根据所述内容切割点将所述目标数据切分为多个数据块，并基于预设规则确定所述多个数据块中的每个数据块对应的字符串；

所述发送服务器根据预先存储的数据块和字符串的对应关系表，将所述目标数据中的目标数据块替换为目标字符串；

所述发送服务器向接收服务器发送包含所述目标字符串的目标数据；

所述接收服务器根据预先存储的数据块和字符串的对应关系表，将所述目标数据中的目标字符串还原为目标数据块；

所述发送/接收服务器周期性向缓存分析服务器发送数据替换记录，所述数据替换记录包含当前周期内已发送/接收数据中的字符串及对应的数据块大小；

所述缓存分析服务器根据每个所述字符串的大小、对应的数据块大小和出现次数，确定所有字符串的缓存比贡献度；

所述缓存分析服务器向所述发送服务器和所述接收服务器发送所述所有字符串的缓存比贡献度；

所述发送服务器和所述接收服务器根据所述缓存比贡献度在所述数据块和字符串的对应关系表删除预设数目个对应关系项。

2.根据权利要求1所述的方法，其特征在于，所述发送服务器对待发送的目标数据按字节计算哈希值，筛选符合预设取值条件的目标哈希值，确定所述目标哈希值对应的数据内容，并基于所述数据内容确定所述目标数据的内容切割点，包括：

发送服务器使用Rabin-Karp指纹算法对目标数据按字节计算哈希值；

所述发送服务器筛选符合预设取值条件的目标哈希值，根据所述目标哈希值确定对应的数据内容，并基于所述数据内容确定所述目标数据的内容切割点；

所述发送服务器根据所述内容切割点将所述目标数据切分为多个数据块，并基于预设规则确定所述多个数据块中的每个数据块对应的字符串，包括：

所述发送服务器根据所述内容切割点将所述目标数据切分为多个数据块，并基于MD5算法计算每个数据块的数字签名。

3.根据权利要求1所述的方法，其特征在于，所述发送服务器向接收服务器发送包含所述目标字符串的目标数据，包括：

所述发送服务器在TCP选项中记录所述目标数据的字符串替换信息，并通过所述TCP协议向接收服务器发送包含所述目标字符串的目标数据。

4.根据权利要求1所述的方法，其特征在于，所述缓存分析服务器通过Apache Hadoop框架下的HDFS存储所述数据替换记录，并基于使用Apache Spark框架确定所述所有字符串的缓存比贡献度。

5.根据权利要求1所述的方法，其特征在于，所述发送服务器向接收服务器发送包含所述目标字符串的目标数据之后，还包括：

所述发送服务器将确定出的所述多个数据块中的每个数据块及其对应的字符串添加至所述数据块和字符串的对应关系表中；

所述接收服务器在接收到所述目标数据后，将所述目标数据切分为多个数据块，并基于预设规则确定所述多个数据块中的每个数据块对应的字符串；

所述接收服务器将确定出的所述多个数据块中的每个数据块及其对应的字符串添加至所述数据块和字符串的对应关系表中。

6.根据权利要求1所述的方法，其特征在于，所述发送服务器根据预先存储的数据块和字符串的对应关系表，将所述目标数据中的目标数据块替换为目标字符串，包括：

所述发送服务器筛选所述目标数据包含的、且在预先存储的数据块和字符串的对应关系表中存在对应关系项的目标数据块；

所述发送服务器根据所述对应关系表确定所述目标数据块对应的目标字符串，并将所述目标数据中的目标数据块替换为所述目标字符串。