[发明专利]Hadoop数据仓库的自动导入数据方法及系统在审
| 申请号： | 201710325690.1 | 申请日： | 2017-05-10 |
| 公开（公告）号： | CN107145585A | 公开（公告）日： | 2017-09-08 |
| 发明（设计）人： | 王振宇 | 申请（专利权）人： | 温州市鹿城区中津先进科技研究院 |
| 主分类号： | G06F17/30 | 分类号： | G06F17/30 |
| 代理公司： | 温州瓯越专利代理有限公司33211 | 代理人： | 吴继道 |
| 地址： | 325000 浙江省温*** | 国省代码： | 浙江;33 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开了一种Hadoop数据仓库的自动导入数据方法，包括步骤一搭载Hadoop数据仓库的服务器C预先配置用于从搭载关系型数据库的服务器A中获取数据的数据传输接口；步骤二搭载作业调度器的服务器B预先配置用于调用所述数据传输接口的调用命令以及执行该调用命令的执行周期；步骤三服务器B按照执行周期定期执行调用命令；步骤四服务器C从服务器A中获取数据并生成HDFS文件；步骤五服务器C将生成的HDFS文件导入至Hive数据仓库中。此外，本发明还公开了一种Hadoop数据仓库的自动导入数据系统，包括服务器A、服务器B以及服务器C。本发明解决了现有技术中每次将关系型数据库中的数据传输至Hadoop的数据仓库时需要人工操作的不便之处。 | ||
| 搜索关键词： | hadoop 数据仓库 自动 导入 数据 方法 系统 | ||
【主权项】：
一种Hadoop数据仓库的自动导入数据方法，其特征在于：包括：步骤一：搭载Hadoop数据仓库的服务器C预先配置用于从搭载关系型数据库的服务器A中获取数据的数据传输接口；步骤二：搭载作业调度器的服务器B预先配置用于调用所述数据传输接口的调用命令以及执行该调用命令的执行周期；步骤三：服务器B按照执行周期定期执行调用命令；步骤四：服务器C从服务器A中获取数据并生成HDFS文件；步骤五：服务器C将生成的HDFS文件导入至Hive数据仓库中。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于温州市鹿城区中津先进科技研究院，未经温州市鹿城区中津先进科技研究院许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201710325690.1/，转载请声明来源钻瓜专利网。
- 上一篇：用于心脏外科停跳手术的冷热交换系统
- 下一篇：一种云台充电宝
