hadoop伪分布模式的安装

本文详细介绍了Hadoop伪分布模式的安装流程,包括核心配置文件修改、生成密钥对、格式化分布式文件系统、启动守护进程及检测启动状态等步骤。

                                                                                  hadoop 伪分布模式的安装

1.修改配置文件

        1)修改 core-site.xml

            <configuration>
            <property>
            <name>fs.default.name</name>
            <value>hdfs://localhost:9000</value>
            </property>
            </configuration>


        2)修改hadoop-env.sh

              将 #export JAVA_HOME=/usr/lib /java

              改为 export JAVA_HOME= /usr/lib/jdk/jdk1.8.0_20

              /usr/lib/jdk/jdk1.8.0_20 为计算机环境的java安装目录中的bin目录的父级目录

        3)修改mapred-site.xml
           <configuration>
           <property>
           <name>mapred.job.tracker</name>
           <value>localhost:9001</value>
           </property>

           </configuration>
 

       4)修改hdfs-site.xml

           <configuration>
           <property>
           <name>dfs.data.dir</name>
           <value>/usr/hadoop/data</value>
           </property>
           <property>
           <name>dfs.replication</name>
           <value>1</value>
           </property>
    
       </configuration>

2.生成密钥对

         1)#cd  /root

         2)#ssh-keygen -t rsa

           Generating public/private rsa key pair.

           Enter file in which to save the key (/root/.ssh/id_rsa):

           /root/.ssh/id_ras already exists.

          Overwrite (y/n)? y

          3)#cd ./ssh

          4)#ls 

            id_rsa   id_rsa.pub  authorized_keys

          5)#cp id_rsa.pub authorized_keys

              cp: overwrite 'authorized_keys' ?      y

3.格式化分布式文件系统

     进入 hadoop的解压目录

     $ bin/hadoop namenode -format


 4.启动守护进程

      进入hadoop的解压目录

      $bin/start-all.sh

5.检测守护进程的启动情况

       进入解压hadoop目录

       1)$ ls /usr/lib/jdk/jdk1.8.0_20/bin/

        2)$/usr/lib/jdk/jdk1.8.0_20/bin/jps

 

 

 

这样 一个hadoop伪分布模式就安装好了

 

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值