Hadoop集群安装 (4) 配置JobTracker_conf/mapred-site.xml

本文介绍了如何配置Hadoop集群中的JobTracker,重点关注`mapred-site.xml`文件,包括JobTracker地址、调度器和队列等设置。详细步骤包括设置JobTracker的必要选项,并参考`mapred-default.xml`文件配置作业调度器和集群本地目录。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

conf/mapred-site.xml

总结:主要配置JobTracker的address,scheduler,queue等。

1. 配置JobTracker (必须设置)

<configuration>
	<property>
		<name>mapreduce.jobtracker.address</name>
		<value>node14:9001</value>
		<description>jobtracker's address</description>
	</property>
</configuration>

2. 还有其他可配置项

具体见hadoop-0.21.0/mapred/src/java/mapred-default.xml中,如

(1)设置作业调度器

<property>
  <name>mapreduce.jobtracker.taskscheduler</name>
  <value>org.apache.hadoop.mapred.JobQueueTaskScheduler</value>
  <description>The class responsible for scheduling the tasks.</description>
</property>
(2) 作业队列

<property>
	<name>mapreduce.job.queuename</name>
	<value>Queue-A:Queue-B:Queue-C</value>
</property>

mapreduce.jobtracker.system.dir

mapreduce.cluster.local.dir


评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值