Hadoop
CFZero
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
hadoop命令大全
1、列出所有Hadoop Shell支持的命令 $ bin/hadoop fs -help2、显示关于某个命令的详细信息 $ bin/hadoop fs -help command-name3、用户可使用以下命令在指定路径下查看历史日志汇总 $ bin/hadoop job -history output-dir这条命令会显示作业的细节信息,失败和终止的任务细节。转载 2014-11-04 17:23:07 · 625 阅读 · 0 评论 -
Hadoop示例程序WordCount详解及实例
部分参考:http://www.javaeye.com/topic/6069621.图解MapReduceMapReduce整体流程图并行读取文本中的内容,然后进行MapReduce操作Map过程:并行读取三行,对读取的单词进行map操作,每个词都以形式生成reduce操作是对map的结果进行排序,合并,最后得出词频。2.简单过程:Input:Hel转载 2014-11-05 11:47:43 · 703 阅读 · 0 评论 -
ubuntu 环境下编译 hadoop 2.6.0的简单方法
由于服务器一般都64位系统,hadoop网站的release版本32位native库不能运行,所以需要自己在编译一下。以下是我采用的一个编译的过程,比较简单,不用下载各种版本及环境配置,通过命令就能自动完成了。系统环境为ubuntuserver 64位版。1、安装JDK,我这里使用的是OenJDKsudo apt-get install default-jdkjava -version转载 2015-07-31 10:37:57 · 400 阅读 · 0 评论
分享