大数据平台端口汇总

最新推荐文章于 2024-10-16 13:48:11 发布

科学的N次方

最新推荐文章于 2024-10-16 13:48:11 发布

阅读量454

点赞数

CC 4.0 BY-SA版权

分类专栏：数据仓库技术体系

本文链接：https://blog.youkuaiyun.com/chenshijie2011/article/details/115669546

数据仓库技术体系专栏收录该内容

141 篇文章 ¥19.90 ¥99.00

订阅专栏

超级会员免费看

本文列举了Hadoop、Zookeeper、Hbase、Hive、Spark、Kafka和Flink等大数据组件的主要服务端口，包括HDFS、Yarn、JournalNode、ZKFC、Zookeeper集群、Hbase的Master和RegionServer、Hive的metastore和JDBC、Spark的Master和Worker、Driver、History Server、Kafka的RPC端口以及Flink的WEB UI端口。此外，还提到了Flume的数据监听端口和不同组件间的端口冲突问题。

Hadoop:
50070：HDFS WEB UI端口
8020 ：高可用的HDFS RPC端口
9000 ：非高可用的HDFS RPC端口
8088 ： Yarn 的WEB UI 接口
8485 ： JournalNode 的RPC端口
8019 ： ZKFC端口
19888：jobhistory WEB UI端口

Zookeeper:
2181 ：客户端连接zookeeper的端口
2888 ： zookeeper集群内通讯使用，Leader监听此端口
3888 ： zookeeper端口用于选举leader

Hbase:
60010：Hbase的master的WEB UI端口（旧的）新的是16010
60030：Hbase的regionServer的WEB UI 管理端口

Hive:
9083 : metastore服务默认监听端口
10000：Hive 的JDBC端口

Spark：
7077 ： spark 的master与worker进行通讯的端口 standalone集群提交Application的端口
8080 ： master的WEB UI端口资源调度
8081 ： worker的WEB UI 端口资源调度
4040 ： Driver的WEB UI 端口任务调度
18080：Spark History Server的WEB UI 端口

Kafka：
9092： Kafka集群节点之间通信的RPC端口

Flink：
8081 ： WEB UI 端口
注意：Spark集群