[发明专利]一种数据处理方法、装置、电子设备以及存储介质在审
申请号: | 202011281592.0 | 申请日: | 2020-11-16 |
公开(公告)号: | CN112383312A | 公开(公告)日: | 2021-02-19 |
发明(设计)人: | 孟川荣;卢祚 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
主分类号: | H03M7/30 | 分类号: | H03M7/30 |
代理公司: | 北京品源专利代理有限公司 11332 | 代理人: | 孟金喆 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据处理 方法 装置 电子设备 以及 存储 介质 | ||
1.一种数据处理方法,包括:
根据数据存储端中候选业务数据的属性信息,从所述候选业务数据中选择待压缩业务数据;
生成携带有所述待压缩业务数据的离线压缩请求;
向数据处理端发送所述离线压缩请求,用于指示所述数据处理端对所述待压缩业务数据进行离线压缩,且向所述数据存储端反馈压缩结果;
采用压缩结果替换数据存储端中的所述待压缩业务数据。
2.根据权利要求1所述的方法,其中,根据数据存储端中候选业务数据的属性信息,从所述候选业务数据中选择待压缩业务数据,包括:
根据数据存储端中候选业务数据的读取频次,从所述候选业务数据中选择待压缩业务数据。
3.根据权利要求1所述的方法,其中,生成携带有所述待压缩业务数据的离线压缩请求,包括:
确定压缩算法和压缩阈值;
生成携带有压缩算法、压缩阈值和所述待压缩业务数据的离线压缩请求。
4.一种数据处理方法,包括:
获取数据存储端发送的携带有待压缩业务数据的离线压缩请求,所述待压缩业务数据基于数据存储端中候选业务数据的属性信息,从所述候选业务数据中选择;
对所述待压缩业务数据进行离线压缩,并向所述数据存储端反馈压缩结果。
5.根据权利要求4所述的方法,其中,对所述待压缩业务数据进行离线压缩,包括:
根据待压缩业务数据的类型,确定压缩算法;
采用压缩算法,对所述待压缩业务数据进行离线压缩。
6.根据权利要求4所述的方法,其中,对所述待压缩业务数据进行离线压缩,并向所述数据存储端反馈压缩结果,包括:
对所述待压缩业务数据进行离线压缩,并对压缩结果进行压缩校验;
在校验结果为通过的情况下,向所述数据存储端反馈压缩结果。
7.根据权利要求6所述的方法,其中,对压缩结果进行压缩校验,包括:
对压缩结果进行解压,并根据所述待压缩业务数据,对解压后的数据进行校验。
8.根据权利要求4所述的方法,其中,对所述待压缩业务数据进行离线压缩,包括:
确定所述待压缩业务数据的优先级;
按照所述优先级,采用压缩算法对所述待压缩业务数据进行离线压缩。
9.根据权利要求8所述的方法,其中,按照所述优先级,采用压缩算法对所述待压缩业务数据进行离线压缩,包括:
确定优先级队列中等于所述优先级和大于所述优先级的请求数量;
根据所述请求数量和极限处理请求数,采用压缩算法对所述待压缩业务数据进行离线压缩。
10.根据权利要求4所述的方法,还包括:
获取用户发起的在线数据写入请求;
对所述在线数据写入请求中的待写入业务数据进行在线压缩,并向所述数据存储端发送包括压缩后的业务数据的数据存储请求,用于指示所述数据存储端将压缩后的业务数据写入所述数据存储端中。
11.根据权利要求4所述的方法,还包括:
根据用户发起的数据读取请求中携带的文件名称,从所述数据存储端获取待解压业务数据和所述待解压业务数据的元信息;其中,所述元信息至少包括压缩算法;
根据所述元信息,对待解压业务数据进行解压,并向用户反馈解压结果。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011281592.0/1.html,转载请声明来源钻瓜专利网。