超级会员免费看
本文详细记录了使用Java编程在高可用Hadoop集群上创建目录及执行MapReduce词频统计的过程。从启动Hadoop集群、上传数据、创建Maven项目到编写并测试MakeDirOnHDFS和WordCount程序，展示了如何应对NameNode故障切换，确保程序的正常运行。
一、提出任务
1、编写Java程序在HDFS上创建目录
2、编写MapReduce程序进行词频统计
二、准备工作
1、启动hadoop集群
（1）启动ZooKeeper集群
在master、slave1与slave2上执行zkServer.sh start
（2）启动JournalNode集群
在master节点上执行hadoop-daemons.sh start journalnode
（3）启动NameNode
在master和slave1上执行hadoop-daemon.sh start namenode
（4）启动DataNode
在master上执行hadoop-daemons.sh start datanode
（5）启动错误恢复机制
在master和slave1节点上执行hadoop-daemon.sh start zkfc
订阅专栏 解锁全文
扫一扫
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
