大数据---常见组件之端口

本文汇总了大数据生态系统中关键组件的默认端口设置,包括Hadoop、Hbase、Hive、Spark等。这些端口对于配置和管理大数据平台至关重要。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

Hadoop

9000:展现抽象目录树的整体目录结构,也就是文件系统的访问入口

50070:namenode主节点的端口号

50090:secondarynamenode的端口号

8020:namenode节点active状态下的端口号

8088: resourcenamenode的端口号

8485 : JournalNode 的RPC端口

8019 : ZKFC端口

19888:jobhistory WEB UI端口

zookeeper(集群需要为奇数)

2181:对cline端提供服务

2888:集群内机器通讯使用(Leader监听此端口)

3888:选举leader使用

Hbase:

    60010:Hbase的master的WEB UI端口 (旧的) 新的是16010

    60030:Hbase的regionServer的WEB UI 管理端口    

Hive:

    9083  :  metastore服务默认监听端口

    10000:Hive 的JDBC端口

Spark:

    7077 : spark 的master与worker进行通讯的端口  standalone集群提交Application的端口

    8080 : master的WEB UI端口  资源调度

    8081 : worker的WEB UI 端口  资源调度

    4040 : Driver的WEB UI 端口  任务调度

    18080:Spark History Server的WEB UI 端口

Kafka:

    9092: Kafka集群节点之间通信的RPC端口

Redis:

    6379: Redis服务端口

mysql:

    3306:mysql的服务端口

CDH:

    7180: Cloudera Manager WebUI端口

    7182: Cloudera Manager Server 与 Agent 通讯端口

HUE:

    8888: Hue WebUI 端口

41414:flume监控的端口

端口    作用
9000    fs.defaultFS,如:hdfs://172.25.40.171:9000
9001    dfs.namenode.rpc-address,DataNode会连接这个端口
50070    dfs.namenode.http-address
50470    dfs.namenode.https-address
50100    dfs.namenode.backup.address
50105    dfs.namenode.backup.http-address
50090    dfs.namenode.secondary.http-address,如:172.25.39.166:50090
50091    dfs.namenode.secondary.https-address,如:172.25.39.166:50091
50020    dfs.datanode.ipc.address
50075    dfs.datanode.http.address
50475    dfs.datanode.https.address
50010    dfs.datanode.address,DataNode的数据传输端口
8480    dfs.journalnode.rpc-address
8481    dfs.journalnode.https-address
8032    yarn.resourcemanager.address
8088    yarn.resourcemanager.webapp.address,YARN的http端口
8090    yarn.resourcemanager.webapp.https.address
8030    yarn.resourcemanager.scheduler.address
8031    yarn.resourcemanager.resource-tracker.address
8033    yarn.resourcemanager.admin.address
8042    yarn.nodemanager.webapp.address
8040    yarn.nodemanager.localizer.address
8188    yarn.timeline-service.webapp.address
10020    mapreduce.jobhistory.address
19888    mapreduce.jobhistory.webapp.address
2888    ZooKeeper,如果是Leader,用来监听Follower的连接
3888    ZooKeeper,用于Leader选举
2181    ZooKeeper,用来监听客户端的连接
60010    hbase.master.info.port,HMaster的http端口
60000    hbase.master.port,HMaster的RPC端口
60030    hbase.regionserver.info.port,HRegionServer的http端口
60020    hbase.regionserver.port,HRegionServer的RPC端口
8080    hbase.rest.port,HBase REST server的端口
10000    hive.server2.thrift.port
9083    hive.metastore.uris
 

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

lipviolet

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值