大数据---常见组件之端口

lipviolet

已于 2022-05-18 22:24:16 修改

阅读量2.1k

点赞数 3

CC 4.0 BY-SA版权

分类专栏：大数据系列文章标签： big data zookeeper hadoop

于 2019-04-01 22:34:20 首次发布

本文链接：https://blog.youkuaiyun.com/lipviolet/article/details/88957873

大数据系列专栏收录该内容

9 篇文章

订阅专栏

本文汇总了大数据生态系统中关键组件的默认端口设置，包括Hadoop、Hbase、Hive、Spark等。这些端口对于配置和管理大数据平台至关重要。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

Hadoop

9000：展现抽象目录树的整体目录结构，也就是文件系统的访问入口

50070：namenode主节点的端口号

50090：secondarynamenode的端口号

8020：namenode节点active状态下的端口号

8088： resourcenamenode的端口号

8485 ： JournalNode 的RPC端口

8019 ： ZKFC端口

19888：jobhistory WEB UI端口

zookeeper（集群需要为奇数）

2181：对cline端提供服务

2888：集群内机器通讯使用（Leader监听此端口）

3888：选举leader使用

Hbase:

60010：Hbase的master的WEB UI端口（旧的）新的是16010

60030：Hbase的regionServer的WEB UI 管理端口

Hive:

9083 : metastore服务默认监听端口

10000：Hive 的JDBC端口

Spark：

7077 ： spark 的master与worker进行通讯的端口 standalone集群提交Application的端口

8080 ： master的WEB UI端口资源调度

8081 ： worker的WEB UI 端口资源调度

4040 ： Driver的WEB UI 端口任务调度

18080：Spark History Server的WEB UI 端口

Kafka：

9092： Kafka集群节点之间通信的RPC端口

Redis：

6379： Redis服务端口

mysql：

3306：mysql的服务端口

CDH：

7180： Cloudera Manager WebUI端口

7182： Cloudera Manager Server 与 Agent 通讯端口

HUE：

8888： Hue WebUI 端口

41414：flume监控的端口

端口   作用
9000   fs.defaultFS，如：hdfs://172.25.40.171:9000
9001   dfs.namenode.rpc-address，DataNode会连接这个端口
50070   dfs.namenode.http-address
50470   dfs.namenode.https-address
50100   dfs.namenode.backup.address
50105   dfs.namenode.backup.http-address
50090   dfs.namenode.secondary.http-address，如：172.25.39.166:50090
50091   dfs.namenode.secondary.https-address，如：172.25.39.166:50091
50020   dfs.datanode.ipc.address
50075   dfs.datanode.http.address
50475   dfs.datanode.https.address
50010   dfs.datanode.address，DataNode的数据传输端口
8480   dfs.journalnode.rpc-address
8481   dfs.journalnode.https-address
8032   yarn.resourcemanager.address
8088   yarn.resourcemanager.webapp.address，YARN的http端口
8090   yarn.resourcemanager.webapp.https.address
8030   yarn.resourcemanager.scheduler.address
8031   yarn.resourcemanager.resource-tracker.address
8033   yarn.resourcemanager.admin.address
8042   yarn.nodemanager.webapp.address
8040   yarn.nodemanager.localizer.address
8188   yarn.timeline-service.webapp.address
10020   mapreduce.jobhistory.address
19888   mapreduce.jobhistory.webapp.address
2888   ZooKeeper，如果是Leader，用来监听Follower的连接
3888   ZooKeeper，用于Leader选举
2181   ZooKeeper，用来监听客户端的连接
60010   hbase.master.info.port，HMaster的http端口
60000   hbase.master.port，HMaster的RPC端口
60030   hbase.regionserver.info.port，HRegionServer的http端口
60020   hbase.regionserver.port，HRegionServer的RPC端口
8080   hbase.rest.port，HBase REST server的端口
10000   hive.server2.thrift.port
9083   hive.metastore.uris