Hadoop集群安装 (4) 配置JobTracker_conf/mapred-site.xml

amaowolf

于 2012-01-09 17:04:07 发布

阅读量1.2w

点赞数

CC 4.0 BY-SA版权

分类专栏： Hadoop 文章标签： hadoop 集群作业 class

本文链接：https://blog.youkuaiyun.com/amaowolf/article/details/7187898

Hadoop 专栏收录该内容

22 篇文章

订阅专栏

本文介绍了如何配置Hadoop集群中的JobTracker，重点关注`mapred-site.xml`文件，包括JobTracker地址、调度器和队列等设置。详细步骤包括设置JobTracker的必要选项，并参考`mapred-default.xml`文件配置作业调度器和集群本地目录。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

conf/mapred-site.xml

总结：主要配置JobTracker的address，scheduler，queue等。

1. 配置JobTracker (必须设置)

<configuration>
	<property>
		<name>mapreduce.jobtracker.address</name>
		<value>node14:9001</value>
		<description>jobtracker's address</description>
	</property>
</configuration>

2. 还有其他可配置项

具体见hadoop-0.21.0/mapred/src/java/mapred-default.xml中，如

(1)设置作业调度器

<property>
  <name>mapreduce.jobtracker.taskscheduler</name>
  <value>org.apache.hadoop.mapred.JobQueueTaskScheduler</value>
  <description>The class responsible for scheduling the tasks.</description>
</property>

(2) 作业队列

<property>
	<name>mapreduce.job.queuename</name>
	<value>Queue-A:Queue-B:Queue-C</value>
</property>

mapreduce.jobtracker.system.dir

mapreduce.cluster.local.dir