hdfs、spark、hive 相关端口号及Web UI界面

spark
master8989(默认8080)
历史服务http://CentOS01:18080 hdfs://CentOS01:8020/directory
sparkhttp://CentOS01:8080/

spark配置外部hive后 如果要在spark-shell中查询hive,必须先启动hive(自定义hive启动文件hiveservices.sh)

spark-shell退出指令  :quit

 
 

hive
10000与hiveserver2连接的端口号
10002

启动前启动mysql、hadoop
(自定义hive启动文件hiveservices.sh)数据存储与hdfs上
set hive.execution.engine=tez;
 

yarn
历史页面主机地址://8088

 
启动kafka前要启动zookeeper

➢Spark 查看当前 Spark-shell 运行任务情况端口号:4040(计算)
➢ Spark Master 内部通信服务端口号:7077
➢ Standalone 模式下,Spark Master Web 端口号:8080(资源)
➢ Spark 历史服务器端口号:18080
➢ Hadoop YARN 任务运行情况查看端口号:8088

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值