Sqoop配置安装

最新推荐文章于 2025-06-02 11:55:56 发布

原创最新推荐文章于 2025-06-02 11:55:56 发布 · 454 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#jdbc #sqoop安装

笔记同时被 2 个专栏收录

31 篇文章

订阅专栏

代码

24 篇文章

订阅专栏

本文详细介绍了如何安装 Sqoop 1.4.3 版本，包括解压、环境变量配置及 JDBC 驱动集成等步骤。适用于希望将关系型数据库数据导入 Hadoop 的用户。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

安装

我使用的版本是sqoop-1.4.3.bin__hadoop-1.0.0.tar.gz，打算安装在/usr/local目录下。首先就是解压缩，重命名为sqoop，然后在文件/etc/profile中设置环境变量SQOOP_HOME。把mysql的jdbc驱动mysql-connector-java-5.1.10.jar复制到sqoop项目的lib目录下。

mysql-connector-java-5.1.6-bin.jar下载地址

重命名配置文件

在${SQOOP_HOME}/conf中执行命令:

mv  sqoop-env-template.sh  sqoop-env.sh

在conf目录下，有两个文件sqoop-site.xml和sqoop-site-template.xml内容是完全一样的，不必在意，我们只关心sqoop-site.xml即可。

修改配置文件sqoop-env.sh

修改内容如下：

#Set path to where bin/hadoop is available
export HADOOP_COMMON_HOME=/usr/local/hadoop/

#Set path to where hadoop-*-core.jar is available
export HADOOP_MAPRED_HOME=/usr/local/hadoop

#set the path to where bin/hbase is available
export HBASE_HOME=/usr/local/hbase

#Set the path to where bin/hive is available
export HIVE_HOME=/usr/local/hive

#Set the path for where zookeper config dir is
export ZOOCFGDIR=/usr/local/zk

配置完成。