linux服务器伪分布模式安装hadoop-1.1.2

本文详细介绍了在Linux环境下安装Hadoop的过程,包括环境准备、JDK安装与配置、SSH免密码登录设置、Hadoop安装及配置、HDFS格式化、Hadoop启动与验证等关键步骤。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

1:环境准备

   1台linux服务器, hadoop安装包( apache官方网下载) jdk1.6+
 
2:安装jdk ,配置好环境变量(etc/profile),java -version 测试正确进行下一步。
 
3:配置ssh免密码登录
     cd ~
     ssh-keygen -t rsa 产生密钥,位于~/.ssh目录下
     

 

     cp ~/.ssh/id_rsa.pub ~/.ssh/authorized_keys  把 id_rsa.pub公钥文件cp到 authorized_ keys
     ssh localhost 登录测试
    

 

  注意:这里的ssh仅仅是单机模式(伪分布)
 
4: 安装hadoop   tar -zxvf  hadoop-1.1.2
  
5:配置hadoop几个重要的配置文件(解压完成的conf目录下)
 a):hadoop-env.sh  指定当前环境jdk安装目录
     export JAVA_HOME=/opt/java/jdk1.7
 b): core-site.xml
   

 

  c):hdfs-site.xml

 d):mapred-site.xml
 

所有文件保存生效
 
5:格式化hdfs
  bin/hadoop namenode -format

 
6: 启动hadoop
  bin/start-all.sh

7:jps 查看进程
 
8:web模式访问 50070和50030端口
   http://192.168.0.111:50070
   http://192.168.0.111:50030



 
 
 

转载于:https://www.cnblogs.com/supertang/p/4097009.html

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值