Hadoop集群搭建之 Sqoop安装手册（1.4.6）

没想到时隔一年多，hadoop安装的文章突然这么多人看到，既然有人看，那我近期就把其他的实验手册一块整理一下，传上来。
不过课程已经是三年前的了，可能略有点老，手册仅供参考。

今天主要介绍下sqoop 1.4.6的安装，使用见下篇

目录

下载并安装Sqoop

1. 下载 Sqoop 1.4.6

2. 上传Sqoop

1）MobaXterm 的 SFTP

3. 安装Sqoop

4. 修改Sqoop配置文件

5. 配置环境变量

6. 安装JDBC驱动包

7.Sqoop效果测试

8. 修改mysql权限

---

下载并安装Sqoop

1. 下载 Sqoop 1.4.6

http://archive.apache.org/dist/sqoop/1.4.6/

2. 上传Sqoop

使用MobaXterm的SFTP工具 或者 使用SecureFXPortable工具 将安装包上传到Hadoop01的/export/software路径下

1）MobaXterm 的 SFTP

3. 安装Sqoop

解压到/export/servers目录下

cd /export/software

tar -zxvf sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz -C /export/servers/

重命名为sqoop-1.4.6

cd /export/servers/

mv sqoop-1.4.6.bin__hadoop-2.0.4-alpha/ sqoop-1.4.6

4. 修改Sqoop配置文件

进入Sqoop解压目录下的conf目录，复制zoo_sample.cfg 并重命名为zoo.cfg

cd /export/servers/sqoop-1.4.6/conf/

cp sqoop-env-template.sh sqoop-env.sh

修改sqoop-env.sh

vim sqoop-env.sh

export HADOOP_COMMON_HOME=/export/servers/hadoop-3.1.3

export HADOOP_MAPRED_HOME=/export/servers/hadoop-3.1.3

export HIVE_HOME=/export/servers/hive-3.1.2

5. 配置环境变量

vim /etc/profile

配置环境变量

export SQOOP_HOME=/export/servers/sqoop-1.4.6

export PATH=$PATH:$SQOOP_HOME/bin

6. 安装JDBC驱动包

将JDBC驱动包mysql-connector-java-5.1.48.jar放到/export/servers/sqoop-1.4.6/lib/目录下

7.Sqoop效果测试

sqoop list-databases -connect jdbc:mysql://localhost:3306/ --username root --password 123456

可以成功查询到连接的mysql数据库中的所有数据库名

8. 修改mysql权限

连接mysql并修改权限为均可登录

mysql -u root -p

修改密码等级及密码长度

set global validate_password_policy=LOW;

set global validate_password_length=6;

GRANT ALL PRIVILEGES ON *.* TO 'root'@'%' IDENTIFIED BY '123456' WITH GRANT OPTION;

退出

exit;

文中提到的安装包如果找不到，可以通过我的百度网盘下载：
链接：https://pan.baidu.com/s/1cBvMzxRMpjPN-sHqIftE4Q 
提取码：6564