背着空空的行壤，一路走来，收拾着点点滴滴...

很好很详细的入门资料 [url]http://hadoop.apache.org/common/docs/r0.18.2/cn/quickstart.html[/url] 有关Hadoop中文资料，可以参考Hadoop官方中文资料（由淘宝技术团队翻译）。 [url]http://hadoop.apache.org/common/docs/r0.20.2/cn/[/url]...

1,master slaves文件只有 namenode secondnamenode jobtracker这3个机器需要知道，其他的datanode不需要知道，也就是说如果修改了这2个文件，那么只要同步以上提到的3个机器就可以了，而一般的开发测试环境，这3个机器是在同一个机器上。 2,需要的默认内存 datanode默认内存为2.8G namenode默认内存为3G secondname...

[code="java"] //是否进入或者是否还在安全模式 hadoop dfsadmin -safemode get //输出 Safe mode is ON //namenode节点的启动和关闭 hadoop-daemon.sh stop namenode hadoop-daemon.sh start namenode //停止某个数据节点上的 HRegionse...

经过一段时间的折腾，终于能在eclipse里面运行MR了。 主要是运行eclipse里面运行的用户必须是 hdfs里面的授权用户，否则报权限不足: permission deny.还有就是hdfs的路径要写对了，我自己的是： [code="java"] hdfs://localhost:9000/usr/local/hadoop/hadoop-dir/hadoop-root/tmp/cjd ...

[url]http://www.hadoopor.com/thread-4288-1-1.html[/url] 这一个简单的命令就会把part-r-*所有的文件合并到a.txt，并且是copy到本地的。很方便 [code="java"] hadoop fs -cat /user/hadoop/part-r-* > a.txt [/code] 尤其对于M/R的结果文件下载查看。...

最近在学hbase，看了好多资料，具体的参考： [url]http://blog.chinaunix.net/u3/102568/article_144792.html[/url] [url]http://blog.youkuaiyun.com/dajuezhao/category/724896.aspx[/url] [url]http://www.javabloger.com/article/apac...

断断续续，折腾了一个礼拜，终于在出差的时候把这个hadoop部署成功了。 我的环境是 VMware + redhat linux5，一台namenode，一台dataqnode，配置的过程中也遇到不少麻烦，一会儿再一一列举。 后来又在slaves里面加了个datanode节点，也成功了。看来这段时间的不断尝试没有白费，接下来就要开始在window+cygwin+eclipse里面写分布式搜索引...

[url]http://ganglia.sourceforge.net/[/url]

经过几天的尝试，终于部署起来了hadoop运行环境， hadoop 0.20.2 cygwin 1.7 win xp eclipse 3.6 第一个例子，就是 hadoop自带的 wordcount. 运行的截图： [img]http://dl.iteye.com/upload/attachment/338272/f8e8beaa-faf2-3a2a-941f-d8620c587...

hadoop1.0.0没有eclipse 插件包，今晚自己编译了一个： [code="java"] check-contrib: init: [echo] contrib: eclipse-plugin init-contrib: ivy-download: [get] Getting: http://repo2.maven.org/maven2...