[发明专利]一种传输数据的方法和系统

说明书

本发明公开了一种传输数据的方法和系统，属于数据传输技术领域。所述方法包括：发送服务器将待发送的目标数据切分为多个数据块，并基于预设规则确定所述多个数据块中的每个数据块对应的字符串；所述发送服务器根据预先存储的数据块和字符串的对应关系表，将所述目标数据中的目标数据块替换为目标字符串；所述发送服务器向接收服务器发送包含所述目标字符串的目标数据；所述接收服务器根据预先存储的数据块和字符串的对应关系表，将所述目标数据中的目标字符串还原为目标数据块。采用本发明，可以有效缓解数据传输的压力，减小了数据传输的网络传输资源的消耗和成本。

技术领域

本发明涉及数据传输技术领域，特别涉及一种传输数据的方法和系统。

背景技术

通过广域网传输数据时，发送服务器可以接收其服务区域内所有用户设备发送的数据，然后将数据分别传输至各目的设备所在区域内的接收服务器，之后由接收服务器将数据转发至各目的设备。

考虑到网络中的热点数据会被众多用户访问和传输，而同一个用户可能会反复访问、获取、分发相同或类似的数据，故而发送服务器和接收服务器之间往往会传输大量的冗余数据。发送服务器在向接收服务器发送数据前，一般会按照预设的压缩规则对数据进行压缩处理。接收服务器在接收到压缩后的数据后，可以按照预设的解压缩规则对压缩后的数据进行还原，从而可以减少数据传输时的数据量。

在实现本发明的过程中，发明人发现现有技术至少存在以下问题：

数据的压缩比因数据的类型而异，其中文本数据的压缩比最大，各种网页数据、办公文件数据的压缩比其次，而多媒体数据和已压缩的数据基本无法进行压缩，故而，数据压缩往往无法有效缓解数据传输的压力，数据传输的网络传输资源的消耗较大、成本较高。

发明内容

为了解决现有技术的问题，本发明实施例提供了一种传输数据的方法和系统。所述技术方案如下：

第一方面，提供了一种传输数据的方法，所述方法包括：

发送服务器将待发送的目标数据切分为多个数据块，并基于预设规则确定所述多个数据块中的每个数据块对应的字符串；

所述发送服务器根据预先存储的数据块和字符串的对应关系表，将所述目标数据中的目标数据块替换为目标字符串；

所述发送服务器向接收服务器发送包含所述目标字符串的目标数据；

所述接收服务器根据预先存储的数据块和字符串的对应关系表，将所述目标数据中的目标字符串还原为目标数据块。

可选的，所述发送服务器将目标数据切分为多个数据块，并基于预设规则确定所述多个数据块中的每个数据块对应的字符串，包括：

发送服务器使用Rabin-Karp指纹算法对目标数据按字节计算哈希值；

所述发送服务器筛选符合预设取值条件的目标哈希值，并根据所述目标哈希值确定所述目标数据的内容切割点；

所述发送服务器根据所述内容切割点将所述目标数据切分为多个数据块，并基于MD5算法计算每个数据块的数字签名。

可选的，所述发送服务器向接收服务器发送包含所述目标字符串的目标数据，包括：

所述发送服务器在TCP选项中记录所述目标数据的字符串替换信息，并通过所述TCP协议向接收服务器发送包含所述目标字符串的目标数据。

可选的，所述方法还包括：

所述发送/接收服务器周期性向缓存分析服务器发送数据替换记录，所述数据替换记录包含当前周期内已发送/接收数据中的字符串及对应的数据块大小；

所述缓存分析服务器根据每个所述字符串的大小、对应的数据块大小和出现次数，确定所有字符串的缓存比贡献度；