Adolph的专栏

sqoop是一个用于在Hadoop和关系型数据库（Oracle，MySQL...）间数据传递的开源工具。下面以oracle为例，介绍使用sqoop将数据从Oracle导入到hadoop中（HDFS、Hive和Hbase）。 1、导入命令及参数介绍 命令格式 [plain] view plain copy $ sqoop import (g

导入过程中，如果发现表示联合主键，则sqoop会将主键的这几个字段用短下划线拼接成hbase的rowkey，然后将剩余部分作为该行的cell存入hbase中。但是如果我们需要将这些作为主键的字段冗余存入cell，则需要进行简单的配置。 对于这种情况出现的原因是，有时我们会用hive建立外部表与hbase表关联，后续进行LADP。 在$SQOOP_HOME/sqoop-site.xml中加入如

这些内容是从sqoop的官网整理出来的，是1.4.3版本的Document，如果有错误，希望大家指正。       1.使用sqoop导入数据 　　 　　sqoop import --connect jdbc:mysql://localhost/db --username foo --table TEST 　　2.账号密码 　　 　　 sqoo

  Sqoop的本质还是一个命令行工具，和HDFS，MapReduce相比，并没有什么高深的理论。 我们可以通过sqoop help命令来查看sqoop的命令选项，如下：   16/11/13 20:10:17 INFO sqoop.Sqoop: Running Sqoop version: 1.4.6 usage: sqoop COMMAND [ARGS]   Available ...