Hadoop：Hadoop简介及环境配置

http://blog.youkuaiyun.com/pipisorry/article/details/51243805

Hadoop简介

下次写上。。。

皮皮blog

配置hadoop环境可能出现的问题

每次format之前最好删除掉保存的日志等文件，免得namenode和datanode的id不一致而出现问题。
搭建完成后运行时候遇到过卡到map阶段不会动情况，然后配置了一下yarn内存可以用了。
每次format之前最好删除掉保存的日志等文件，免得namenode和datanode的id不一致而出现问题。

Eclipse中使用hadoop编程

下载安装eclipse

root用户打开eclipse：

root@ubuntu-BDMS:~# /opt/eclipse/eclipse &

下载配置hadoop的eclipse插件

下载hadoop-eclipse-plugin-2.6.0.jar到eclipse安装目录/plugins目录下[hadoop2x-eclipse-plugin]

guest@ubuntu-BDMS:~$ sudo wget -P /opt/eclipse/plugins/ https://github.com/winghc/hadoop2x-eclipse-plugin/blob/master/release/hadoop-eclipse-plugin-2.6.0.jar

[Eclipse下搭建Hadoop2.4.0开发环境]

[基于Eclipse的Hadoop应用开发环境配置]

[hadoop2.6.0的eclipse插件编译和设置]

from: http://blog.youkuaiyun.com/pipisorry/article/details/51243805

ref: Hadoop文档

[脱离JVM? Hadoop生态圈的挣扎与演化]