3.安装hadoop

1.与安装jdk同理拷贝压缩包,解压到/opt/module/

详情见:https://blog.youkuaiyun.com/daxuddaai/article/details/109150650

2.配置环境

[hx@spark06 ~]$ vim /etc/profile
添加下面的内容

##HADOOP_HOME
export HADOOP_HOME=/opt/module/hadoop-3.1.4
export PATH=$PATH:$HADOOP_HOME/bin
export PATH=$PATH:$HADOOP_HOME/sbin

3查看

[hx@spark06 ~]$ hadoop version

注意不是 -version

### 安装独立运行的 Hadoop 步骤详解 根据您提供的内容以及常见实践,以下是详细的操作步骤: #### 1. 安装 Linux 和 SSH 工具 首先确保您的计算机已安装 Linux 操作系统,并能够通过 SSH 工具如 `PuTTY` 或者内置终端来进行远程管理。 #### 2. 创建 Hadoop 用户并切换至其工作界面 ```bash sudo adduser hadoop # 添加用户名为"hadoop"的新用户 passwd hadoop # 提示输入新用户的密码 su - hadoop # 切换到hadoop用户登录状态 ``` #### 3. 建立程序存放路径 在 `/home/hadoop/` 目录下建立一个新的文件夹用于放置即将下载的所有工具包和其他项目源码。 ```bash mkdir ~/program # 如果不在home目录则需指定绝对路径 mkdir /home/hadoop/program cd ~/program # 进入刚刚创建好的文件夹 pwd # 确认当前所在位置是否正确 ``` #### 4. 使用 WinSCP/XShell/FinalShell 将本地压缩包上传至此服务器 选择合适的客户端软件(例如WinSCP),利用 SFTP 协议把从官网获取的 tar.gz 格式的 Hadoop 及 JDK 的二进制分发版传送到刚才准备好的 program 文件夹里。 #### 5. 解压归档后的资源到目标位置 分别对两个tarball进行解压操作: ```bash tar xzvf jdk-xxx-linux-x64.tar.gz -C ./ tar xzvf hadoop-y.yy.zzz-src.tar.gz -C ./ # 注意替换上面命令中的 xxx, y.yy.zzz 成实际版本号 ``` #### 6. 配置环境变量 (编辑 ~/.bashrc) 打开隐藏配置文件 `.bashrc` 并添加以下行以设置 JAVA_HOME 和 HADOOP_HOME: ```bash nano ~/.bashrc # 打开编辑.bashrc文件 export JAVA_HOME=/home/hadoop/program/jdk1.x.x_xxx # 替换成真实的JDK路径 export PATH=$JAVA_HOME/bin:$PATH # 更新$PATH包含新的binaries export HADOOP_INSTALL=/home/hadoop/program/hadoop-y.yy.zzz # 设定HADOOP_HOME指向正确的地址 export PATH=$PATH:$HADOOP_INSTALL/bin # 同样地加入path以便直接调用所有指令 source ~/.bashrc # 应用更改 ``` **提示:** 修改完成后一定要执行 source 来加载最新的改动! #### 7. 测试验证安装情况 最后一步就是检查是否有错误发生以及确认所期望的功能都正常运作了。 ```bash which java # 查看默认使用的 Java 版本信息 javac -version # 显示 javac 编译器的具体详情 hadoop version # 展现 Hadoop 发布说明包括版权等文本 ``` ---
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值