虚拟机HADOOP安装的基本环境配置

最新推荐文章于 2025-01-31 16:45:37 发布

苏打盐汽水

最新推荐文章于 2025-01-31 16:45:37 发布

阅读量1.2k

点赞数

分类专栏： Hadoop 文章标签： linux 大数据 hadoop

本文链接：https://blog.youkuaiyun.com/DAIMAZHUANG/article/details/108525210

版权

Hadoop 专栏收录该内容

2 篇文章

订阅专栏

虚拟机HADOOP安装的基本环境配置

任务

安装并配置jdk环境;
安装并配置Hadoop环境；
所需软件
VMware
WinSCP
Xshell6

#所需安装包
jdk-8u161-linux-x64.tar.gz（其他适合的liunx版本jdk也行）
下载地址：link.
hadoop-3.2.1.tar.gz（其他大于2.1以上的稳定版本也行）
下载地址：link.

进入虚拟机终端查询IP地址：然后打开WinSCP填写IP地址和虚拟机用户名和密码连接
建立放置jdk和hadoop的文件夹,通过WinSCP开始上传安装包在虚拟机终端确认已经上传就可以开始解压和配置环境变量了

解压jdk：
终端输入命令：tar xzvf jdk文件名字
配置jdk的环境变量
输入命令：vi /etc/profile
添加环境变量：i键开始编辑到最后添加
export JAVA_HOME=jdk所在位置（eg：/home/sutwo/jdk）
exportCLASSPATH=.:JAVA_HOME/jre/lib/rt.jar:JAVA_HOME/lib/dt.jar:JAVA_HOME/lib/tools.jar
export PATH=JAVA_HOME/bin:PATHect
Esc退出编辑，输入:wq!保存并退出
生效命令：source /etc/profile
检测版本：java -version

解压Hadoop
输入命令：tar xzvf hadoop文件名字
同样进入:vi /etc/profile 进入编辑模式在最后添加
export HADOOP_HOME=/root/hadoop-3.2.1export PATH=PATH:HADOOP_HOME/bin:$HADOOP_HOME/sbin
生效命令：source /etc/profile

拓展（ssh设置免密）：
ssh localhost 首次登录会有提示
输入YES然后就要输入你Hadoop的密码，这样就能登录到本机了但是每次这样都要输入密码，而且无法启动FDNS所以需要配成SSH无密码模式
首先退出刚才的sshexit
退出刚才的 ssh localhostcd ~/.ssh/
若没有该目录，请先执行一次ssh localhostssh-keygen -t rsa
会有提示，都按回车就可以cat ./id_rsa.pub >> ./authorized_keys
加入授权此时再用 ssh localhost 命令，无需输入密码就可以直接登陆了