mapreduce wordcount案例

最新推荐文章于 2025-05-13 10:11:00 发布

sjtu_chenchen

最新推荐文章于 2025-05-13 10:11:00 发布

阅读量500

点赞数 1

CC 4.0 BY-SA版权

分类专栏： hadoop 数据结构算法 java技术文章标签： mapreduce wordcount

本文链接：https://blog.youkuaiyun.com/sjtu_chenchen/article/details/49475611

java技术同时被 3 个专栏收录

96 篇文章 ¥19.90 ¥99.00

订阅专栏

超级会员免费看

数据结构算法

50 篇文章

订阅专栏

hadoop

7 篇文章

订阅专栏

本文档详细介绍了如何使用MapReduce实现WordCount案例。首先，需在HDFS的/wc目录下创建/src子目录，放入待处理文本，/wc/out目录会由程序自动生成。接着，将相关文件打包成jar并存放在本地。最后，通过hadoop命令运行jar文件，执行WCrunner。

//---------------------WCmapper.java-------------------
package pack1;

import java.io.IOException;
import org.apache.hadoop.io.LongWritable;
import org.apache.hadoop.io.Text;
import org.apache.hadoop.mapreduce.Mapper;

public class WCmapper  extends Mapper <LongWritable, Text, Text,