Hadoop, HBase, Hive, ZooKeeper默认端口说明

最新推荐文章于 2024-10-11 09:07:30 发布

zxzLife

最新推荐文章于 2024-10-11 09:07:30 发布

阅读量854

点赞数 1

分类专栏：大数据

大数据专栏收录该内容

41 篇文章

订阅专栏

本文详细列举了Hadoop生态系统中的关键组件如HDFS、YARN、HBase、Hive及ZooKeeper等默认使用的TCP端口及其配置项，为部署与维护这些组件提供了实用的参考。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

Hadoop, HBase, Hive, ZooKeeper默认端口说明

组件 Daemon 端口配置说明
HDFS DataNode 50010 dfs.datanode.address datanode服务端口，用于数据传输
50075 dfs.datanode.http.address http服务的端口
50475 dfs.datanode.https.address https服务的端口
50020 dfs.datanode.ipc.address ipc服务的端口
NameNode 50070 dfs.namenode.http-address http服务的端口
50470 dfs.namenode.https-address https服务的端口
8020 fs.defaultFS 接收Client连接的RPC端口，用于获取文件系统metadata信息。
journalnode 8485 dfs.journalnode.rpc-address RPC服务
8480 dfs.journalnode.http-address HTTP服务
ZKFC 8019 dfs.ha.zkfc.port ZooKeeper FailoverController，用于NN HA
YARN ResourceManager 8032 yarn.resourcemanager.address RM的applications manager(ASM)端口
8030 yarn.resourcemanager.scheduler.address scheduler组件的IPC端口
8031 yarn.resourcemanager.resource-tracker.address IPC
8033 yarn.resourcemanager.admin.address IPC
8088 yarn.resourcemanager.webapp.address http服务端口
NodeManager 8040 yarn.nodemanager.localizer.address localizer IPC
8042 yarn.nodemanager.webapp.address http服务端口
8041 yarn.nodemanager.address NM中container manager的端口
JobHistory Server 10020 mapreduce.jobhistory.address IPC
19888 mapreduce.jobhistory.webapp.address http服务端口
HBase Master 60000 hbase.master.port IPC
60010 hbase.master.info.port http服务端口
RegionServer 60020 hbase.regionserver.port IPC
60030 hbase.regionserver.info.port http服务端口
HQuorumPeer 2181 hbase.zookeeper.property.clientPort HBase-managed ZK mode，使用独立的ZooKeeper集群则不会启用该端口。
2888 hbase.zookeeper.peerport HBase-managed ZK mode，使用独立的ZooKeeper集群则不会启用该端口。
3888 hbase.zookeeper.leaderport HBase-managed ZK mode，使用独立的ZooKeeper集群则不会启用该端口。
Hive Metastore 9083 /etc/default/hive-metastore中export PORT=<port>来更新默认端口
HiveServer 10000 /etc/hive/conf/hive-env.sh中export HIVE_SERVER2_THRIFT_PORT=<port>来更新默认端口
ZooKeeper Server 2181 /etc/zookeeper/conf/zoo.cfg中clientPort=<port> 对客户端提供服务的端口
2888 /etc/zookeeper/conf/zoo.cfg中server.x=[hostname]:nnnnn[:nnnnn]，标蓝部分 follower用来连接到leader，只在leader上监听该端口。
3888 /etc/zookeeper/conf/zoo.cfg中server.x=[hostname]:nnnnn[:nnnnn]，标蓝部分用于leader选举的。只在electionAlg是1,2或3(默认)时需要。

所有端口协议均基于TCP。

转载于: https://blog.youkuaiyun.com/haoxiaoyan/article/details/52884564

组件	Daemon	端口	配置	说明
HDFS	DataNode	50010	dfs.datanode.address	datanode服务端口，用于数据传输
		50075	dfs.datanode.http.address	http服务的端口
		50475	dfs.datanode.https.address	https服务的端口
		50020	dfs.datanode.ipc.address	ipc服务的端口
	NameNode	50070	dfs.namenode.http-address	http服务的端口
		50470	dfs.namenode.https-address	https服务的端口
		8020	fs.defaultFS	接收Client连接的RPC端口，用于获取文件系统metadata信息。
	journalnode	8485	dfs.journalnode.rpc-address	RPC服务
		8480	dfs.journalnode.http-address	HTTP服务
	ZKFC	8019	dfs.ha.zkfc.port	ZooKeeper FailoverController，用于NN HA
YARN	ResourceManager	8032	yarn.resourcemanager.address	RM的applications manager(ASM)端口
		8030	yarn.resourcemanager.scheduler.address	scheduler组件的IPC端口
		8031	yarn.resourcemanager.resource-tracker.address	IPC
		8033	yarn.resourcemanager.admin.address	IPC
		8088	yarn.resourcemanager.webapp.address	http服务端口
	NodeManager	8040	yarn.nodemanager.localizer.address	localizer IPC
		8042	yarn.nodemanager.webapp.address	http服务端口
		8041	yarn.nodemanager.address	NM中container manager的端口
	JobHistory Server	10020	mapreduce.jobhistory.address	IPC
		19888	mapreduce.jobhistory.webapp.address	http服务端口
HBase	Master	60000	hbase.master.port	IPC
		60010	hbase.master.info.port	http服务端口
	RegionServer	60020	hbase.regionserver.port	IPC
		60030	hbase.regionserver.info.port	http服务端口
	HQuorumPeer	2181	hbase.zookeeper.property.clientPort	HBase-managed ZK mode，使用独立的ZooKeeper集群则不会启用该端口。
		2888	hbase.zookeeper.peerport	HBase-managed ZK mode，使用独立的ZooKeeper集群则不会启用该端口。
		3888	hbase.zookeeper.leaderport	HBase-managed ZK mode，使用独立的ZooKeeper集群则不会启用该端口。
Hive	Metastore	9083	/etc/default/hive-metastore中export PORT=<port>来更新默认端口
	HiveServer	10000	/etc/hive/conf/hive-env.sh中export HIVE_SERVER2_THRIFT_PORT=<port>来更新默认端口
ZooKeeper	Server	2181	/etc/zookeeper/conf/zoo.cfg中clientPort=<port>	对客户端提供服务的端口
		2888	/etc/zookeeper/conf/zoo.cfg中server.x=[hostname]:nnnnn[:nnnnn]，标蓝部分	follower用来连接到leader，只在leader上监听该端口。
		3888	/etc/zookeeper/conf/zoo.cfg中server.x=[hostname]:nnnnn[:nnnnn]，标蓝部分	用于leader选举的。只在electionAlg是1,2或3(默认)时需要。