Hadoop的参数配置说明

hadoop.tmp.dir

hadoop临时目录，默认值/tmp/hadoop-${user.name}

fs.default.name

设置hadoop默认文件系统，URI的形式，需要指定namenode的主机名和端口

dfs.replication

默认是3

dfs.block.size

默认64M

dfs.data.dir

datanode的本地文件系统目录，存放hdfs块文件

dfs.name.dir

namenode的本地文件系统目录，存放hdfs的metadata

dfs.df.interval

磁盘使用统计刷新时间间隔，单位毫秒

dfs.client.block.write.retries

写数据到datanode的重试次数

dfs.heartbeat.interval

datanode心跳时间间隔，单位秒

mapred.job.tracker

jobtracker的ip地址、端口

mapred.system.dir

hdfs目录，存储共享的mapreduce系统文件

mapred.local.dir

tasktracker本地文件系统目录，存储临时数据文件

mapred.tasktracker.map.tasks.maximum

tasktracker上同时运行的map的最大数量

mapred.tasktracker.reduce.tasks.maximum

tasktracker上同时运行的reduce的最大数量