搭建Hadoop集群中遇到的坑

最新推荐文章于 2021-08-19 09:49:27 发布

mdifferent

最新推荐文章于 2021-08-19 09:49:27 发布

阅读量1.4k

点赞数

CC 4.0 BY-SA版权

分类专栏： BigData 文章标签： hadoop hive

本文链接：https://blog.youkuaiyun.com/mdifferent/article/details/44854393

在工作中搭建Hadoop集群时，遇到了一些问题。在Hadoop Core篇中，配置失误导致NameNode和SecondaryNameNode启动异常，通过调试发现应在NameNode节点运行dfs-start.sh。此外，未配置DataNode时需屏蔽slaves文件中的额外节点。在Hive篇的内容未给出，可能包含Hive在集群中的部署和使用注意事项。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

工作需要搭建个Hadoop集群，找了几台机器，配置如下：

IP	角色
10.128.84.20	ResourceManager
10.128.84.21	NameNode & SecondaryNameNode
10.128.84.22	DataNode & NodeManager
10.128.84.24	DataNode & NodeManager
10.128.84.25	DataNode & NodeManager
10.128.84.27	DataNode & NodeManager