Java
我是鲨鱼胃
身体是最硬的金属
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
20190319-利用MapReduce去重和排序
1 分析数据去重 Distinct原文件内容2015-3-1a2015-3-2b2015-3-1a2015-5-4d目标结果2015-3-1a2015-3-2b2015-5-4dMyMapper.javapackage DataDistinct;import java.io.IOException;import org.apache.hadoop.io.Text;...原创 2019-03-20 21:01:25 · 210 阅读 · 0 评论 -
20190319&20-MapReduce编程模型和YARN平台
文章目录MapReduce编程模型wordcount词频统计WordCount编程实例shuffleYARN平台MapReduce编程模型MapReduce是一种可用于数据处理的编程模型。该模型比较简单,但用于编写有用的程序并不简单。Hadoop可以运行由各种语言编写的MapReduce程序。例如:Java、Python和C++语言等。最重要的是,MapReduce程序本质上是并行运行的,因此...原创 2019-03-20 20:46:34 · 210 阅读 · 0 评论
分享