[发明专利]数据处理方法及处理系统有效
申请号: | 200810187997.0 | 申请日: | 2008-12-31 |
公开(公告)号: | CN101770461A | 公开(公告)日: | 2010-07-07 |
发明(设计)人: | 孟繁力;刘刚;王雅文;焦丽红 | 申请(专利权)人: | 中国移动通信集团黑龙江有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京中誉威圣知识产权代理有限公司 11279 | 代理人: | 王春光;彭晓玲 |
地址: | 150001 黑龙*** | 国省代码: | 黑龙江;23 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种数据处理方法及处理系统。其中数据处理方法包括:根据预设的配置文件从数据源抽取数据;在内存中对抽取的数据进行第一转换;将第一转换后的数据载入到数据仓库中;根据预设的任务对数据仓库中的数据进行第二转换。本发明的数据处理方法及处理系统,根据转换的数据量和特性,通过将转换效率较高、系统资源消耗小的第一转换在内存中执行,而将其他转换效率低且系统资源消耗较大的转换在数据仓库中进行,大大减少了内存中处理数据的切换,降低了主机I/O资源吞吐,并且,利用数据库的索引技术,使得海量数据的关联转换效率大幅度提高。 | ||
搜索关键词: | 数据处理 方法 处理 系统 | ||
【主权项】:
一种数据处理方法,其特征在于,包括:根据预设的配置文件从数据源抽取数据;在内存中对所述抽取的数据进行第一转换;将所述第一转换后的数据载入到数据仓库中;根据预设的任务对所述数据仓库中的数据进行第二转换。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国移动通信集团黑龙江有限公司,未经中国移动通信集团黑龙江有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/200810187997.0/,转载请声明来源钻瓜专利网。