Just Do IT

本文简单介绍Sqoop如下操作：Import：​ rdbms导入HDFS;​ rdbms导入Hive；​ rdbms导入Hbase；Export：​ Hive导出到rdbms；​ Hbase导出到rdbms；其中，rdbms以mysql数据库为例。环境准备mysql中建库、建表并插入测试数据：create database userdb;use userdb;creat...

我们在使用Sqoop的增量导入时，需要配置三个参数：假设有这样的场景：使用Sqoop每天定时导出一张表（emp）的增量数据，其中emp的id列为自增列。那么此时有两种方式实现：(1) 每天收工配置last-value，手工调度；(2) 使用job，给定初始last-value，每天定时自动跑；相信大多数人会选择（2）种方式。为什么job可以给定一次last-value就可以自动抽取...