[发明专利]一种数据处理方法、装置及系统有效
申请号: | 201611228802.3 | 申请日: | 2016-12-27 |
公开(公告)号: | CN108241717B | 公开(公告)日: | 2021-08-17 |
发明(设计)人: | 李宗璋;王治国;石志同;刘珂;崔岩;彭伟;杨金辉;李国强;韩增富 | 申请(专利权)人: | 中国移动通信集团公司;中国移动通信集团山东有限公司 |
主分类号: | G06F16/2455 | 分类号: | G06F16/2455;G06F16/27;H04L29/08 |
代理公司: | 北京路浩知识产权代理有限公司 11002 | 代理人: | 李相雨 |
地址: | 100033 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据处理 方法 装置 系统 | ||
1.一种数据处理方法,其特征在于,包括:
将采集到的数据实时存储到实时数据库中,并每隔第一周期将所述实时数据库中满足预设条件的数据进行处理后发送到只读数据库;
将所述实时数据库中在第一存储时刻之前的数据删除,其中所述第一存储时刻是当前时刻之前第一存储时间段对应的时刻;
每隔第二周期将所述只读数据库中在第二存储时刻之前的数据进行处理后发送至报表数据库,并将所述只读数据库中在所述第二存储时刻之前的数据删除,其中所述第二存储时刻是所述当前时刻之前第二存储时间段对应的时刻,且所述第一存储时间段小于所述第二存储时间段;
其中,所述将所述实时数据库中在第一存储时刻之前的数据删除包括:
在所述实时数据库的第一缓存区缓存第一缓存数据,将除第一缓存数据外且在所述第一存储时刻之前的数据删除,所述第一缓存数据包括所述第一存储时刻之前第一缓存时间段内的数据,其中所述第一缓存时间段小于所述第一存储时间段;
相应地,所述将所述只读数据库中在所述第二存储时刻之前的数据删除包括:在所述只读数据库的第二缓存区缓存第二缓存数据,将除第二缓存数据外且在所述第二存储时刻之前的数据删除,所述第二缓存数据包括所述第二存储时刻之前第二缓存时间段内的数据,其中所述第二缓存时间段小于所述第二存储时间段。
2.根据权利要求1所述的方法,其特征在于,所述将采集到的数据实时存储到实时数据库中包括:按照监控内容建立多个数据存储表,将所述采集到的数据存储到对应的所述数据存储表中。
3.根据权利要求1所述的方法,其特征在于,所述每隔第一周期将所述实时数据库中满足预设条件的数据进行处理后发送到只读数据库,包括:
每隔第一周期将所述实时数据库中没有添加索引的数据添加索引,并发送至所述只读数据库,其中所述索引包括:数据内容标识、基站编号、以及数据采集的时间。
4.根据权利要求1所述的方法,其特征在于,所述每隔第二周期将所述只读数据库中在第二存储时刻之前的数据进行处理后发送至报表数据库,包括:
每隔第二周期为所述只读数据库中在所述第二存储时刻之前的数据建立报表,并对所述在所述第二存储时刻之前的数据进行抽样,获取抽样数据,并将所述报表以及所述抽样数据存储到所述报表数据库,所述报表包括:掉话次数及对应的时间,接通次数及失败次数。
5.一种数据处理装置,其特征在于,包括:
第一处理单元,用于将采集到的数据实时存储到实时数据库中,并每隔第一周期将所述实时数据库中满足预设条件的数据进行处理后发送到只读数据库;
第二处理单元,用于将所述实时数据库中在第一存储时刻之前的数据删除,其中所述第一存储时刻是当前时刻之前第一存储时间段对应的时刻;
第三处理单元,用于每隔第二周期将所述只读数据库中在第二存储时刻之前的数据进行处理后发送至报表数据库,并将所述只读数据库中在所述第二存储时刻之前的数据删除,其中所述第二存储时刻是所述当前时刻之前第二存储时间段对应的时刻,且所述第一存储时间段小于所述第二存储时间段;
其中,所述第二处理单元具体用于:在所述实时数据库的第一缓存区缓存第一缓存数据,将除第一缓存数据外且在所述第一存储时刻之前的数据删除,所述第一缓存数据包括所述第一存储时刻之前第一缓存时间段内的数据,其中所述第一缓存时间段小于所述第一存储时间段;
相应地,所述第三处理单元具体用于:在所述只读数据库的第二缓存区缓存第二缓存数据,将除第二缓存数据外且在所述第二存储时刻之前的数据删除,所述第二缓存数据包括所述第二存储时刻之前第二缓存时间段内的数据,其中所述第二缓存时间段小于所述第二存储时间段。
6.根据权利要求5所述的装置,其特征在于,所述第一处理单元具体用于:按照监控内容建立多个数据存储表,将所述采集到的数据存储到对应的所述数据存储表中。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国移动通信集团公司;中国移动通信集团山东有限公司,未经中国移动通信集团公司;中国移动通信集团山东有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201611228802.3/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种资源导入方法及装置
- 下一篇:一种数据并行处理的方法及服务器