大数据常用端口及服务启动命令

已于 2022-05-15 15:54:24 修改
阅读量2.2k 收藏 10
点赞数 1
CC 4.0 BY-SA版权
分类专栏： 大数据 文章标签： big data hadoop spark hdfs 大数据
于 2022-02-19 16:15:22 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/qq_17685725/article/details/123018919
本文介绍了大数据领域常用的服务端口，包括Hadoop、Spark、Hbase、CDH和DolphinScheduler等，并详细列举了各组件的WebUI端口、通信端口以及服务启动命令，为大数据系统的管理和监控提供了参考。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

大数据常用端口：

 示例：在浏览器地址栏中输入 192.168.88.161:9870 或 node1:9870

Hadoop 端口

  • Hadoop 的 NameNode 的 WebUI 端口号：9870
  • Yarn的 All Applicationn 的 WebUI 端口号：8088
  • Hadoop 的 HistoryServer 的 WebUI 端口号：19888
  • Hadoop 的 NameNode 进程的 通信端口号：8020

Spark 端口

  • Master 的 WebUI端口号：8080
  • Worker 的 WebUI 查看端口号：8081
  • 一个正在运行的 Spark 应用的 WebUI 监控页面端口号：4040
  • Spark的 historyServer 的 WebUI 端口号：18080
  • Master 进程的 通信端口号：7077
  • Worker 进程的 通信端口号：707

Hbase 端口

最低0.47元/天 解锁文章

200万优质内容无限畅学
大数据运维存档（0）linux系统运维常用命令
Big_data_implicit_
12-26 316
1、常用命令 1.1、查看主机CPU使用情况 1.1.1、sar sar -u 1 5 说明：已1秒为周期查询5次当前主机总体CPU使用情况。 %user 用户空间的 CPU 使用 %nice 改变过优先级的进程的 CPU 使用率 %system 内核空间的 CPU 使用率 %iowait CPU 等待 IO 的百分比 %steal 虚拟机的虚拟机 CPU 使用的 CPU %idle 空闲的 CPU 主要看%iowait 和%idle，%iowait 过高表示存在 I/O 瓶颈，.
大数据集群和工作中常用的Shell脚本--更新中
weixin_43605446的博客
05-15 464
以三台服务器组成的集群为例-注意脚本需要授权。
大数据 默认各框架端口号（已给大佬么整理好，必知）
禧年
05-02 1888
前言： 1. 作为一名攻城狮默认的端口你得知道，使用起来也方便，不必查看。 2.记下来面试官问你时，你会心里一点不虚的说出来。 Hadoop： 查看配置:主机名+19888 config 50070：HDFS WEB UI端口 8020 ： 高可用的HDFS RPC端口 (namenode)通用端口 9000 ： 非高可用的HDFS RPC端口 8088 ： Yarn 的WEB UI 接口...
端口相关命令
m0_46772078的博客
07-25 1258
netstat-ntulp|grep6379//查看所有1935端口使用情况·–add-port=6379/tcp#添加端口，格式为端口/通讯协议。netstat-ntlp//查看当前所有tcp端口·–permanent#永久生效，没有此参数重启后失效。linux开放指定端口命令。–zone#作用域。#开放端口8080。...
Hadoop中 8020、9000、50070 端口用途的详细对比
最新发布
xiaoyu070321的博客
05-19 1050
Hadoop 的核心服务通过不同端口对外提供服务，不同版本中端口号可能有所变化。Hadoop 3.x 对部分默认端口进行了调整，例如 NameNode 的 RPC 端口在 2.x 和 3.x 中均为 8020，而 9000 端口在 3.x 中已弃用。HTTP 管理界面端口在 2.x 中为 50070，而在 3.x 中改为 9870。配置文件（如 hdfs-site.xml）中需明确指定端口，避免硬编码。升级时需注意端口变化，并参考官方文档进行调整。
hadoop中hdfs和yarn等常用相关端口号
weixin_49130065的博客
07-27 5336
hadoop常用端口号 默认端口 配置 说 明 组件 50070 dfs.namenode.http-address http服务的端口 hdfs 50075 dfs.datanode.http-address http...
HDFS集群部署成功但网页无法打开如何解决（显示配置通过浏览器访问hdfs的端口）
锵锵锵锵蒋的博客
04-19 8695
HDFS集群部署成功（3台虚拟机）但是网页端无法打开，通过显示指定端口解决！！
hadoop的9870端口不能访问WEB界面的解决办法汇总
热门推荐
weixin_43498449的博客
06-07 4万+
hadoop的9870端口不能访问WEB界面的解决办法汇总
【大数据集群搭建-Apache】Apache版本大数据组件启动命令
weixin_53543905的博客
03-07 556
注意这里所有的组件安装目录都为，大家执行的时候更改到自己的安装路径即可。【大数据集群搭建-Apache】Apache版本大数据组件启动命令
架构师培训教程 大数据高并发服务器实战 第1篇-Linux 02-文件系统结构及常用shell命令 共62页.pptx
11-25
1. **Linux文件系统结构及常用shell命令**： - Linux文件系统采用单一文件树结构，以根目录`/`开始，所有文件和设备都在这个树状结构中。 - `/bin`和`/sbin`目录存储基础系统程序，前者面向所有用户，后者主要用于...
Hadoop【2】- web-ui访问Hadoop集群
weixin_43763859的博客
05-02 3714
Web访问Hadoop 一旦Hadoop集群启动并运行， 可以通过web-ui进行集群的查看， 一、NameNode的访问 http://had-node1:9870 上面的had-node1改为自己设置的 ##要注意 ###这里我的hadoop的版本是3.2， 所以是9870的端口， 一定注意这个差别， 2.xd的端口50070 二、ResourceManager的访问 http:had-n...
hadoop9870端口无法访问解决方法之一
wangjianyin123的博客
10-26 958
1.在电脑搜索栏输入记事本，然后以管理员身份运行。2.打开后，点文件下的打开。
【分布式】Hadoop完全分布式的搭建（零基础）
fukase_mio的博客
10-28 3712
本文旨在指导读者如何在虚拟化环境中构建一个完全分布式的Hadoop集群。内容涵盖了从网络和节点的规划到环境设置，再到实现SSH免密登录、配置文件的准备、软件的分发与安装、集群的启动与停止。
namenode的启动
weixin_43810802的博客
10-14 4325
我们简单看下namenode启动需要经历的步骤。 namenode启动要做什么启动9870服务端口加载镜像文件和编辑日志文件初始化RPC服务启动资源检查检查心跳检查是否进入安全模式 启动9870服务端口 因为namenode是一个进程，所以找到它的main方法： 进入createNameNode： 找到new NodeNode(conf)，进去。 找到初始化方法，进入： 他要获取绑定的地址，我们希望知道这个地址是什么。 看看这个默认的地址： 端口号是9870。这就是我们经常用的namenode的
hadoop配置
RayMand168的博客
06-16 600
hadoop相关配置
Hadoop HDFS搭建日志
越开源越幸运
12-17 1万+
目录 HDFS集群搭建 一、配置hosts文件 二、建立hadoop运行帐号 三、配置ssh免密码连入 更新known_hosts updated 四、下载并解压hadoop安装包 Hadoop 启动/停止集群和节点的命令 操作系统：Ubuntu16.04 Server HDFS集群搭建 阅读：https://blog.csdn.net/boori/article/detail...
node:打不开/node：已拒绝访问
顾北的猫的博客
06-05 4123
初学者会遇到的问题
hive的安装,启动,连接操作(最详细解决方案,直接按着操作即可)
weixin_59295776的博客
09-15 1万+
hive的安装 1. 修改 hadoop的 core-site.xml中, 添加以下内容: #修改hadoop 配置文件 etc/hadoop/core-site.xml,加入如下配置项:<property> <name>hadoop.proxyuser.root.hosts</name> <value>*</value></property><property> <name>hadoop....
Hadoop的部署和配置
十二的博客
11-26 1268
Hadoop下载地址 https://archive.apache.org/dist/hadoop/common/hadoop-3.1.3/ 一.Hadoop的安装 1.把hadoop-3.1.3.tar.gz上传到linux的/opt/software目录下 hadoop-3.1.3.tar.gz 2.解压hadoop-3.1.3.tar.gz到/opt/server/目录下面 [linux@node1 software]$ tar -zxvf hadoop-3.1.3.tar.gz -C /opt
深入解读Linux系统常用命令及应用
常用于检查系统端口和服务状态。 ```bash netstat -tulnp ``` 4. **ssh**：安全地访问远程服务器。ssh命令加密了所有传输的数据，提供了安全连接。 ```bash ssh username@hostname ``` 5. **scp**：secure ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

竹长大大

客官，赏个银子吧，别下次一定了

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值