Hadoop wordcount源码

最新推荐文章于 2020-10-27 09:53:39 发布

yandao

最新推荐文章于 2020-10-27 09:53:39 发布

阅读量275

点赞数

分类专栏：大数据 hadoop 文章标签： mapreduce hadoop 大数据 spark

本文链接：https://blog.youkuaiyun.com/yandao/article/details/108560666

版权

本文详细介绍了如何将Hadoop的WordCount程序打包，并通过Hadoop MapReduce执行。从编写计数程序，到将其上传至Hadoop节点，再到使用hadoop jar命令运行，并查看输出结果，每个步骤都有清晰的说明。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

1.写完计数程序打包成jar
只要class文件即可
2.上传到node1上
3.hadoop jar wordcount.jar com.hadoop.mr.WordCount

hdfs dfs -ls /data/output
hdfs dfs -cat /data/output/part-r-00000
也可以把内容copy到当前的目录
hdfs dfs -get /data/output/* ./

package com.hadoop.mr.count;

import java.io.IOException;
import java.util.StringTokenizer;

import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.Path;
import org.apache.hadoop.io.IntWritable;
import org.apache.hadoop.io.Text;
import org.apache.hadoop.mapreduce.Job;
import org.apache.hadoop.mapreduce.Mapper;
import org.apache.hadoop.mapreduce.Reducer;
import org

最低0.47元/天解锁文章