Hadoop（HDFS、YARN、HBase、Hive和Spark等）默认端口表

最新推荐文章于 2022-06-07 15:08:44 发布

转载最新推荐文章于 2022-06-07 15:08:44 发布 · 977 阅读

博客提供了Hadoop及其相关组件如HDFS、YARN、HBase、Hive和Spark等的默认端口信息，对于使用这些大数据技术的开发者和运维人员，可依据此端口表进行系统配置和调试。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

「已注销」

关注关注

0
点赞
踩
2

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

Hadoop生态简介，Hive、Spark、HBase等

随便写写，随便写写

05-16

9684

Hadoop生态全景介绍，Spark、Hive、HBase等

大数据基础知识-Hadoop、HBase、Hive一篇搞定

最新发布

qq_41680016的博客

05-28

9730

相应的，数据库由于规模较小，因此可以支持的数据规模较小，一般单张表中能存储百万条数据(最新版的MySQL经过优化，单表中可以存储千万条或者上亿条数据，即使是一亿条数据，也就10GB大小，且此时效率会非常低)。HBase数据存储依靠HDFS，HDFS存储数据具有一次写入，多次读取的特点，其不支持对数据进行修改，但是HBase存储数据为KV型，通过对相同的K再次写入，根据TimeStamp不可逆的特点，每次写入的数据的时间戳都比上一个数据的时间戳大，从而完成版本号的维护和数据的更新。

参与评论您还未登录，请先登录后发表或查看评论

hadoop常见端口号

jiedaodezhuti的博客

02-08

820

hadoop2.x Hadoop3.x 访问HDFS端口 50070 9870 访问MR执行情况端口 8088 8088 历史服务器 19888 19888 客户端访问集群端口 9000 8020 ...

大数据面试--Hadoop以及Spark常用端口号

weixin_44516261的博客

09-23

412

Hadoop常用端口号 hdfs mapreduce 历史服务器内部通信端口 9870 8088 19888 9820 50070 8088 19888 9000 Spark端口号 local模式： spark-shell 4040 standalone模式： ...

大数据Hadoop+HBase+Spark+Hive集群搭建教程(七月在线)1

08-03

在构建大数据处理环境时，Hadoop、HBase、Spark和Hive是四个核心组件，它们协同工作以实现高效的数据存储、处理和分析。本教程将详细介绍如何在Ubuntu系统上搭建这些组件的集群。 1. **Hadoop**：Hadoop是Apache...

Hadoop 1.X & Hadoop 2.X 默认端口对比

二十三小时

11-02

2126

1，Hadoop 2.X 默认端口 组件节点 默认端口 配置用途说明 HDFS DataNode 50010 dfs.datanode.address datanode服务端口，用于数据传输 HDFS DataNode 50075 dfs.datanode.http.address http服务的端口 HDFS Data

简述Hadoop的几个默认端口及其含义。

m0_57498038的博客

05-29

1179

1）dfs.namenode.http-address:50070 2）SecondaryNameNode辅助名称节点端口号：50090 3）dfs.datanode.address:50010 4）fs.defaultFS:8020 或者9000 5）yarn.resourcemanager.webapp.address:8088

hadoop集群中一些默认的端口和配置大全

weixin_33675507的博客

11-14

746

2019独角兽企业重金招聘Python工程师标准>>> ...

spark 与 hadoop的hdfs的连接（亲测有效）

热门推荐

AStar的博客

04-03

2万+

出处：：http://blog.csdn.net/oopsoom/article/details/24257981，目前Spark的Run on的Hadoop版本大多是hadoop2以上，但是实际上各个公司的生产环境不尽相同，用到2.0以上的公司还是少数。大多数公司还是停留在1代hadoop上，所以我就拿spark0.91 + hadoop0.20.2-cdh3u

大数据hadoop之YARN理解与架构简单分析

weixin_39715061的博客

06-28

2120

hadoop—haddop部署、yarn管理器使用、hdfs的高可用、yarn的高可用、Hbase分布式部署

qq_43114229的博客

06-07

467

1、hadoop简介

Hadoop和Spark常用端口号

liusuoyin的博客

09-23

1214

Hadoop和Spark常用端口号大数据中Hadoop和Spark的重要性不必多言，常用端口号必须得记得死死的。 Hadoop2.x: 访问HDFS端口 50070 访问MR执行情况端口 8088 访问历史服务器 19888 客户端访问集群端口 9000 Hadoop3.x: 访问HDFS端口 9870 访问MR执行情况端口 8088 访问历史服务器 19888 客户端访问集群端口 8020 Spark：查看当前Spark-shell 运行情况端

Spark部分：几个重要的端口汇总

wyqwilliam的博客

08-12

1万+

50070：HDFSwebUI的端口号 8485:journalnode默认的端口号 9000：非高可用访问数rpc端口 8020：高可用访问数据rpc 8088：yarn的webUI的端口号 8080：master的webUI，Tomcat的端口号 7077：spark基于standalone的提交任务的端口号 8081：worker的webUI的端口号 18080：histor...

hadoop端口号和配置文件

sinat_19371493的专栏

10-15

2012

webapp 一般为localhost的8088端口，当然也可以去

spark 几个端口

seaReal1的博客

04-25

7872

4040：每个Driver的SparkContext都会启动一个web节目，默认端口是404018080: 启动历史服务器： ./sbin/start-history-server.sh ，日志跟目录必须在spark.history.fs.logDirectory中配置，每个子目录对应一个Spark程序的事件日志。历史服务会启动web节目，默认端口 18080...

hadoop中hdfs和yarn等常用相关端口号

weixin_49130065的博客

07-27

5342

hadoop常用端口号 默认端口 配置说明组件 50070 dfs.namenode.http-address http服务的端口 hdfs 50075 dfs.datanode.http-address http...

hadoop(hdfs、yarn、hbase、hive和spark等)默认端口表

06-28

下面是hadoop各组件的默认端口表： 1. HDFS（Hadoop分布式文件系统）： - NameNode端口：50070 - SecondaryNameNode端口：50090 - DataNode端口：50075 2. YARN（Hadoop资源调度系统）： - Resource Manager Web...