相关笔记

unix vmware 查看共享文件夹的内容 , /mnt/hgfs/window目录共享的文件夹

yum install java 后的安装路径是 /usr/lib/jvm/java-1.8.0/jre/bin

编辑配置文件 vi /etc/profile

安装完eclipse 查找到hadoop/contrib/hadoop plugin

把这个复制到eclipse的plugin文件夹下面

一个各个版本的eclipse 的下载连接地址
http://mirror.bit.edu.cn/eclipse/technology/epp/downloads/release/luna/SR2/

删除非空文件夹

rm -rf filename

移动文件

mv filename /flodername

然后配置hadoop的文件夹路径, 然后配置一下MAp reduce master 对应在mapred.xml那个文件下 例子是用h0 9001 旁边的用9000

然后在对那个DFS 的东西单击右键, reconect 就会出来文件系统

查看linux 的安全日志

cat /var/log 里面的secure

eclipse 路径 /user/local/2/eclipse

centos 切换输入法. 在设置里面有. 然后是win+空格键

然后在hadoop目录下找到那些core啊 tool包全部倒进去

在运行java程序的时候,输出的文件夹是要不存在的.

run configueration 里的argument 参数里写上

第一个是输入路径 用的是绝对路径
hdfs://localhost:9000/user/james/input 输入路径
hdfs://localhost:9000/user/james/output 输出路径

跑之前要记得导入包

Name node is in safe mode. 意思是hadoop进入了安全模式.过一段时间他就会自动的结束掉安全模式的. 但是要快速的结束安全模式只需要输入命令
bin/hadoop dfsadmin -safemode leave

更改使用的java版本
update-alternatives –config java

ps 查找进程, kill -9 PID 关闭该进程

Ubuntu（ubuntu-12.04-desktop-amd64）

查看防火墙状态：ufw status

关闭防火墙：ufw disable

---

CentOS6.0

查看防火墙状态：service iptables status

关闭防火墙：chkconfig iptables off #开机不启动防火墙服务

---

centos7.0(默认是使用firewall作为防火墙，如若未改为iptables防火墙，使用以下命令查看和关闭防火墙)

查看防火墙状态：firewall-cmd --state

关闭防火墙：systemctl stop firewalld.service

没有找到到主机的路由 原因是有服务器的防火墙没有关闭 直接关闭就好了

map 的输入格式key value 必须和 reducer的输入 的 key value 相同

右键 export 然后选择输出目录文件夹, 然后选择main函数,导出即可

运行一个jar 文件

hadoop jar /usr/hadoop/test.jar(选择的jar包) /usr/hadoop/tets2 选择主函数 /hadoop/home/out 选择输出文件夹