Hadoop数据仓库的自动导入数据方法及系统与流程

文档序号:11230660阅读:来源:国知局

技术特征:

技术总结
本发明公开了一种Hadoop数据仓库的自动导入数据方法,包括:步骤一:搭载Hadoop数据仓库的服务器C预先配置用于从搭载关系型数据库的服务器A中获取数据的数据传输接口;步骤二:搭载作业调度器的服务器B预先配置用于调用所述数据传输接口的调用命令以及执行该调用命令的执行周期;步骤三:服务器B按照执行周期定期执行调用命令;步骤四:服务器C从服务器A中获取数据并生成HDFS文件;步骤五:服务器C将生成的HDFS文件导入至Hive数据仓库中。此外,本发明还公开了一种Hadoop数据仓库的自动导入数据系统,包括服务器A、服务器B以及服务器C。本发明解决了现有技术中每次将关系型数据库中的数据传输至Hadoop的数据仓库时需要人工操作的不便之处。

技术研发人员:王振宇
受保护的技术使用者:温州市鹿城区中津先进科技研究院
技术研发日:2017.05.10
技术公布日:2017.09.08
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1