
Sqoop
何安忆、
这个作者很懒,什么都没留下…
展开
-
sqoop报错总结
缺少MYSQL JDBC驱动ERROR sqoop.Sqoop: Got exception running Sqoop: java.lang.RuntimeException: Could not load db driver class:com.mysql.jdbc.Driverjava.lang.RuntimeException: Could not load db driver ...原创 2019-04-25 16:01:54 · 1604 阅读 · 0 评论 -
使用Sqoop将Mysql数据导入Hive踩坑
背景:由于公司这个项目存在阿里云上,不能由DBA来维护,所以想要把数据从Mysql抽取到Hive上就需要我们自己来动手。。。数据量不是很大,但是分了巨多的库;需要导入的只有7张表,但是大概有94个库,每个库下边都有这七张表。初步设计方案是在把Mysql不同数据库的数据存放在Hive表不同的分区,就是一张hive表大概有90多个分区。最初想法:1.先用sqoop复制表结构;2.循环数据库...原创 2019-04-12 17:25:54 · 2874 阅读 · 0 评论