MapReduce学习——运行MapReduce程序（测试）

最新推荐文章于 2022-09-30 19:06:36 发布

weixin_43501742

最新推荐文章于 2022-09-30 19:06:36 发布

阅读量334

点赞数 1

CC 4.0 BY-SA版权

分类专栏： MapReduce 文章标签： MapReduce学习之路

本文链接：https://blog.youkuaiyun.com/weixin_43501742/article/details/89602938

本文档详细介绍了MapReduce程序的运行步骤。首先，在pom.xml中添加Maven依赖并验证下载成功。接着，通过运行MapReduce命令，上传文件到HDFS根目录，统计README.txt中单词的频率。使用'yarn jar'启动job，指定hadoop-mapreduce-examples-2.7.1.jar，并设置输出目录。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

第一步：

**
在pom.xm中添加MapReduce程序的Maven依赖

	<properties>
		<project.build.sourceEncoding>UTF-8</project.build.sourceEncoding>
	</properties>
	 
	<dependencies>
		<dependency>
			<groupId>org.apache.hadoop</groupId>
			<artifactId>hadoop-common</artifactId>
			<version>${hadoop.version}</version>
		</dependency>
	 
		<dependency>
			<groupId>org.apache.hadoop</groupId>
			<artifactId>hadoop-mapreduce-client-core</artifactId>
			<version>${hadoop.version}</version>
		</dependency>
		<dependency>
			<groupId>org.apache.hadoop</groupId>
			<artifactId>hadoop-mapreduce-client-jobclient</artifactId>
			<version>${hadoop.version}</version>
		</dependency>
	</dependencies>
	<build>
		<plugins>
			<plugin>
				<groupId>org.a