didadidadige的专栏

一、需要软件 ubuntu14.04LTS hadoop2.6.0 jdk eclipse 二、环境配置 2.1修改bashrc文件 sudo gedit ~/.bashrc java环境配置，添加以下内容 export JAVA_HOME=/home/dida/jdk1.7.0_75    export JRE_HO

在VMWare中构建第二、三台虚拟机，机器命名为Slave1、Slave2 在/etc/hostname中修改主机名vim /etc/hostname修改为Master、Slave1、Slave2，重启后生效step1：在各主机中修改主机名与ip对应关系打开/etc/hosts 修改成如下所示 测试连接Masterping Master在Slave1、Slave2中增加所有ip与

文件操作 查看目录文件 $ hadoop dfs -ls /dida/input创建文件目录 $ hadoop dfs -mkdir /dida/input删除文件 $ hadoop dfs -rm /dida/input/a.txt删除目录与目录下所有文件 $ hadoop dfs -rmr /dida/output上传文件 上传一个本机/home/dida/hadoop/input/f1.t

1.配置conf/hbase-env.shexportJAVA_HOME=/usr/lib/jvm/java export HBASE_MANAGES_ZK=true//使用hbase自带的zookeeper2.配置conf/hbase-site.xml<configuration> <property> <name>hbase.rootdir</name> <value>hdfs

欢迎使用Markdown编辑器写博客本Markdown编辑器使用StackEdit修改而来，用它写博客，将会带来全新的体验哦： Markdown和扩展Markdown简洁的语法 代码块高亮 图片链接和图片上传 LaTex数学公式 UML序列图和流程图 离线写博客 导入导出Markdown文件 丰富的快捷键 快捷键 加粗 Ctrl + B 斜体 Ctrl + I 引用 Ctrl

配置~/.bashrc文件，在底下添加：export PIG_INSTALL=/home/hadoop/pig-0.15.0 export PATH=$PATH:$PATH:$PIG_INSTALL/bin export PIG_CLASSPATH=$HADOOP_INSTALL/etc/hadoop/最后一句话把pig配置成mapreduce模式然后 source ~/.bashrc使其生效