
hadoop
iteye_17257
这个作者很懒,什么都没留下…
展开
-
Hadoop第一步:部署分布式服务
[color=red][b]原创文章:转载请注明出处[/b][/color]最近有幸开始接触云。哈哈,先从hadoop入手部署hadoop的文档很多,但是还是遇到了不少问题,下面和大家分享一下我的部署全过程吧版本号:hadoop 0.21.0 下载地址:[url]http://www.apache.org/dyn/closer.cgi/hadoop/core/ [/url]...2011-01-17 13:44:59 · 117 阅读 · 0 评论 -
hadoop第二步:将hadoop的HDFS替换成KFS
[color=red][b]原创文章:转载请注明出处http://wangwei3.iteye.com/blog/895867[/b][/color]最近需要把hadoop的HDFS替换成KFS。其实具体性能的差异我还没有测试过。不过理论上说,C+写的KFS应该在性能上比HDFS更胜一筹。关于底层的FS的支持。hadoop的扩展性着实不错。KFS便是其中一种那么如何配置呢?首先...2011-01-25 16:26:20 · 245 阅读 · 0 评论 -
初探map/reduce原理
下面的代码来自于hadoop官网,但是那个例子很繁琐,我对此作了简化运行下面代码必须在linux系统上,并且已经成功部署安装hadoop[code="java"]package com.hadoop.test3;import java.io.IOException;import java.util.*;import org.apache.hadoop.f...2011-10-10 16:06:25 · 153 阅读 · 0 评论 -
nutch 2.1 分布式hbase部署
官方文档:http://wiki.apache.org/nutch/Nutch2Tutorial?action=show&redirect=GORA_HBase现在网上针对nutch 2.0 以上版本的部署内容很残缺。经过两天奋战,终于把nutch 2.1在hbase上部署成功了!在此与网友分享。准备两台机器:cr5(master):192.168.8.185,cr8(slav...原创 2013-02-28 17:07:01 · 276 阅读 · 0 评论 -
HDFS异常集合 - - 持续更新
[b][size=x-large][color=red]AccessControlException[/color][/size][/b]eclipse 运行一些基本的对HDFS操作代码报没有权限的异常:[code="java"] org.apache.hadoop.security.AccessControlException: Permission denied: user=jhm, ...原创 2013-03-28 11:48:17 · 232 阅读 · 0 评论