使用 cloudera 挂载HDFS ,关于部署HDFS 可以参考这里

前一段时间做HDFS 测试,mount HDFS 过程 ,整理一下分享!

 

1 获取cdh3 yum 源


  
  1. wget -c http://archive.cloudera.com/redhat/cdh/cdh3-repository-1.0-1.noarch.rpm 

2 安装下载的rpm 包


  
  1. yum --nogpgcheck localinstall cdh3-repository-1.0-1.noarch.rpm 

//安装后将得到 cloudera-cdh3.repo 文件


  
  1. [root@namenode ~]# ll /etc/yum.repos.d/ 
  2. total 40 
  3. -rw-r--r-- 1 root root 1926 Aug 29  2011 CentOS-Base.repo 
  4. -rw-r--r-- 1 root root  631 Aug 29  2011 CentOS-Debuginfo.repo 
  5. -rw-r--r-- 1 root root  626 Aug 29  2011 CentOS-Media.repo 
  6. -rw-r--r-- 1 root root 5390 Aug 29  2011 CentOS-Vault.repo 
  7. -rw-r--r-- 1 root root  201 Jul 14  2011 cloudera-cdh3.repo 

3 导入 rpm key


  
  1. rpm --import http://archive.cloudera.com/redhat/cdh/RPM-GPG-KEY-cloudera

4 安装 hadoop-0.20-fuse


  
  1. yum install hadoop-0.20-fuse 

5 安装配置java 环境


  
  1. //下载安装jdk 
  2. chmod +x jdk-6u26-linux-x64-rpm.bin  
  3. ./jdk-6u26-linux-x64-rpm.bin  
  4.  
  5. //编辑 profile 
  6. vim /etc/profile 
  7. export JAVA_HOME=/usr/java/jdk1.6.0_26 
  8. export PATH=$JAVA_HOME/bin:$PATH 
  9.  
  10. //载入环境变量
  11. souce /etc/profile

6 配置 /etc/hosts文件添加namenode


  
  1. vim /etc/hosts 
  2.  
  3. 10.0.100.75      namenode 

7 创建挂载点并挂载hdfs


  
  1. mkdir -p /data/hdfs/ 
  2. chown -R hdfs:hdfs /data/hdfs/ 
  3. hadoop-fuse-dfs dfs://namenode:8020 /data/hdfs 

8 卸载hdfs


  
  1. umount /data/hdfs 

 

结束

参考

https://ccp.cloudera.com/display/CDHDOC/Mountable+HDFS