清风恋歌的博客

准备 Java JDK：jdk-8u121-linux-x64.tar.gz Hadoop：hadoop-2.7.3.tar.gz 三台计算机，分别为1个master节点，2个slave节点。 环境的构建修改主机名，使用命令hostnamectl set-hostname master.hadoop将Master节点计算机主机名改为master.hadoop；其

准备 下载sqoop-1.4.6 下载地址：https://mirrors.tuna.tsinghua.edu.cn/apache/sqoop/1.4.6/ 这里，sqoop-1.4.6.tar.gz里面居然并没有sqoop-1.4.6.jar包，后期启动的时候会出现：运行sqoop错误，找不到或者无法加载主类org.apache.sqoop.sqoop这个错误，而在

当我们在配置多台计算，使之可以相互使用无密码登录-ssh,之前都是一台一台的配置，现在一台A上添加B，然后在另一台B上再次添加A，这样使得authorized_keys中的内容相同，但时并不是完全相同，比如添加顺序。如果超过2台，这种配置就相当复杂了，而且容易出错。后来，在网上看到了一种简单的配置，所有机器只需配置一遍即可。安装ssh. sudo apt-get install ssh. 安装完成

sqoop使用指南一、sqoop介绍Sqoop是一个用来将Hadoop和关系型数据库中的数据相互转移的工具。可以将一个关系数据库（例如:MySQL,Oracle等）中的数据导进到Hadoop的HDFS文件系统中，也可以将HDFS的数据导进关系型数据库。二、sqoop数据导入（以SQLServer数据库为例）(1)、全表导入全表导入，顾名思义就是将关系型数据库指定的表数据导入到HDFS文件系统的