Sqoop 安装配置及下载地址

本文介绍了Sqoop的安装步骤,包括解压安装包、设置环境变量、编辑sqoop-env.sh配置文件、拷贝jar包,并提供了下载链接。 Sqoop是用于在Hadoop和关系数据库间迁移数据的工具,支持数据的导入、转换和导出。

使用安装包版本:
sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz
下载地址 http://www.apache.org/dyn/closer.lua/sqoop/

一.简介

Sqoop是一种旨在在Hadoop与关系数据库或大型机之间传输数据的工具。您可以使用Sqoop将数据从MySQL或Oracle等关系数据库管理系统(RDBMS)或大型机导入Hadoop分布式文件系统(HDFS),在Hadoop MapReduce中转换数据,然后将数据导出回RDBMS 。

二.安装

1、解压sqoop

[root@master app]# pwd
/root/app
[root@master app]# tar -zxvf sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz -C /usr/local/src/

2、环境变量

[root@master app]# vi ~/.bash_profile
export SQOOP_HOME=/usr/local/src/sqoop-1.4.7.bin__hadoop-2.6.0
export PATH=$PATH:$SQOOP_HOME/bin
[root@master app]# source ~/.bash_profile

3、进入sqoop/conf/sqoop-env.sh添加路径

[root@master app]# cd $SQOOP_HOME/conf
[root@master conf]# pwd
/usr/local/src/sqoop-1.4.7.bin__hadoop-2.6.0/conf
[root@master conf]# cp sqoop-env.template.sh sqoop-env.sh
[root@master conf]# vi sqoop-env.sh

4、sqoop-env.sh的添加内容

export HADOOP_COMMON_HOME=/usr/local/src/hadoop-2.6.0
export HADOOP_MAPRED_HOME=/usr/local/src/hadoop-2.6.0
export HIVE_HOME=/usr/local/src/hive-1.2.2
export ZOOKEEPER_HOME=/usr/local/src/zookeeper-3.4.5
[root@master conf]# source sqoop-env.sh

5、拷贝jar包——详细请看关于 jar包下载

https://blog.youkuaiyun.com/weixin_44593925/article/details/103773794

[root@master lib]# cp /usr/local/src/hive-1.2.2/lib/mysql-connector-java-5.1.46-bin.jar /usr/local/src/sqoop-1.4.7.bin__hadoop-2.6.0/lib/

6、运行:

[root@master conf]# sqoop help

在这里插入图片描述

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值