[发明专利]一种历史数据存储方法和系统在审
申请号: | 201410363419.3 | 申请日: | 2014-07-28 |
公开(公告)号: | CN104102737A | 公开(公告)日: | 2014-10-15 |
发明(设计)人: | 杨亮;王晶 | 申请(专利权)人: | 中国农业银行股份有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 王宝筠 |
地址: | 100005 北*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 历史数据 存储 方法 系统 | ||
1.一种历史数据存储方法,其特征在于,包括:
依据预先制定的筛选策略对信息系统产生的结构化历史数据进行筛选,得到待归档的结构化历史数据,所述待归档的结构化历史数据包括至少一种类型的数据表;
依据预先设定的数据抽取策略获取所述待归档的结构化历史数据中每种类型数据表所属的数据抽取方式,其中,所述数据抽取方式包括增量抽取方式和全量抽取方式;
若相应类型数据表的抽取方式为增量抽取方式,则对所述类型数据表中的数据进行增量抽取,得到文本文件格式的增量数据;
若相应类型数据表的抽取方式为全量抽取方式,则对所述类型数据表中的数据进行全量抽取,得到文本文件格式的全量数据;
将所述文本文件格式的增量数据以及全量数据保存至存储设备。
2.根据权利要求1所述的方法,其特征在于,所述数据表的类型包括明细类、主档类和静态类。
3.根据权利要求1所述的方法,其特征在于,所述存储设备为磁盘存储设备。
4.根据权利要求1所述的方法,其特征在于,还包括:
分别为所述增量数据所在的文本文件以及所述全量数据所在文本文件配置元数据,所述元数据记录所述文本文件的属性信息。
5.根据权利要求4所述的方法,其特征在于,还包括:
对保存后的所述文本文件格式的数据进行归档管理,所述归档管理包括文件归档、权限管理、文件检索、文件下载、任务监控和元数据管理。
6.根据权利要求5所述的方法,其特征在于,还包括:
通过对保存后的所述文本文件格式的数据进行查询管理,实现对保存数据的再利用。
7.一种历史数据存储系统,其特征在于,包括筛选模块、获取模块、增量抽取模块、全量抽取模块以及保存模块,其中:
所述筛选模块,用于依据预先制定的筛选策略对信息系统产生的结构化历史数据进行筛选,得到待归档的结构化历史数据,所述待归档的结构化历史数据包括至少一种类型的数据表;
所述获取模块,用于依据预先设定的数据抽取策略获取所述待归档的结构化历史数据中每种类型数据表所属的抽取方式,其中,所述抽取方式包括增量抽取方式和全量抽取方式;
所述增量抽取模块,用于在相应类型数据表的抽取方式为增量抽取方式时,对所述类型数据表中的数据进行增量抽取,得到文本文件格式的增量数据;
所述全量抽取模块,用于在相应类型数据表的抽取方式为全量抽取方式时,对所述类型数据表中的数据进行全量抽取,得到文本文件格式的全量数据;
所述保存模块,用于将所述文本文件格式的增量数据以及全量数据保存至存储设备。
8.根据权利要求7所述的系统,其特征在于,还包括配置模块,所述配置模块用于分别为所述增量数据所在的文本文件以及所述全量数据所在文本文件配置元数据,所述元数据记录所述文本文件的属性信息。
9.根据权利要求8所述的系统,其特征在于,还包括归档管理模块,所述管理模块用于对保存后的所述文本文件格式的数据进行归档管理,所述归档管理包括文件归档、权限管理、表信息查询、文件检索、文件下载和元数据管理。
10.根据权利要求8所述的系统,其特征在于,还包括查询管理模块,所述查询管理模块用于通过对保存后的所述文本文件格式的数据进行查询管理,实现对保存数据的再利用。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国农业银行股份有限公司,未经中国农业银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201410363419.3/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种西珠口服液及其制备方法
- 下一篇:在终端上进行音乐专属播放的方法和系统