hbase 进阶之旅二： hbase 启动源码分析

最新推荐文章于 2024-07-23 18:00:00 发布
原创 最新推荐文章于 2024-07-23 18:00:00 发布 · 280 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

1、从 org.apache.hadoop.hbase.master.HMaster 的main开始，下图是关系图

入口函数是HMaster.main()，然后再跟下去到HMasterCommandLine.run(),使用了common-cli包的读取参数：

 

跟进去 这说明

 

 

再跟 会有一个判断，如果是start 调用startMaster（）

 

明天go on ...

 

 

【硬刚大数据】我们在学习Spark的时候，到底在学习什么？
微信搜：import_bigdata，大数据领域硬核原创作者
08-29 568
欢迎关注博客主页：https://blog.csdn.net/u013411339 欢迎点赞、收藏、留言 ，欢迎留言交流！本文由【王知无】原创，首发于 优快云博客！本文首发优快云论坛，未经过官方和本人允许，严禁转载！ 本文是对《【硬刚大数据之学习路线篇】从零到大数据专家的学习指南(全面升级版)》的面试部分补充。 很多小伙伴在群里或者私信留言问我关于Spark的学习路径问题。 Spark发展至今，应该说已经非常成熟了。是大数据计算领域不得不学习的框架。尤其是Spark在稳定性和社区发展的成..
爬虫教程（ 6 ） --- 爬虫 进阶、扩展
墨鱼菜鸡
07-11 7325
1. 前言 1. 先看一个最简单的爬虫。 import requests url = "http://www.cricode.com" r = requests.get(url) print(r.text) 2. 一个正常的爬虫程序 上面那个最简单的爬虫，是一个不完整的残疾的爬虫。因为爬虫程序通常需要做的事情如下： 1)给定的种子 URLs，...
hbase源码 启动顺序分析
Jack Sparrow
12-16 410
启动时我们会执行 start-hbase.sh ，下面来分析一下这个脚本, 首先会设置一下bin目录 然后执行如下操作： 1、执行.$bin/hbase-config.sh 2、看是否是自动执行，是参数是 autostart  否则是 start 3、执行 .$bin/hbase-daemon.sh 下边我们分析一下源码（源码是基于hbase 3.0）： 调用java类，java服务端 从...
HBase1.0.0版源码分析之HMaster启动代码分析(1)
Grok coding
03-21 1718
本文其实还算不上真正的启动代码解析,本文主要还是从启动流程上分析到startHMaster部分,初次之外本文将就HBase的伪分布式调试方式进行相关的介绍. 我们将源码倒入到Intellij IDE之后会得到如下的代码结构: 这里我们进入hbase-server中在src/main下面的resources中添加hadoop-metrics2-hbase.properties,hbase
【HBase】【一】windows搭建源码开发环境
Lanna_w的博客
12-09 1662
windows搭建源码开发环境
Hbase启动源码
m0_37039331的博客
12-18 275
Hbase 1.2 HMaster的启动采用了ToolRunner： 将conf和args封装成GenericOptionsParser对象parser, 根据parser获取toolArgs 返回tool.run(toolArgs); 返回tool.run(toolArgs); @see HMasterCommandLine#run 各种参数检查 if ("start".equals(co...
hbase 源代码分析 （9） hbase启动过程
chenfenggang的专栏
07-14 1740
hbase的启动过程。 过程如下： 1）运行start-hbase.sh 2) 加载conf,加载需要lib，class文件，包括jdk里面的，hbase本身的。 3）判断安装模式 4）如果集群模式需要启动 a）zookeeper， b）Master c）RegionService d）master-backup 如果本地模式则只需要启动master就够了。 在master里面会new一个zk，和启动一个regionService，但是这个master和regionSerivce是同一个JVM
java架构师进阶之路
henhenha的博客
03-30 5430
包含了计算机基础、算法和数据结构、常用工具、java核心知识、性能优化、基础框架、数据库、消息队列、缓存中间件、搜索引擎、大数据、RPC、网关、容器、面试等知识
如何学习Python：糙快猛的大数据之路（学习地图）
一个8年大数据开发工程师的碎碎念
07-23 4327
想要掌握Python大数据开发吗？本文带你从"糙快猛"起步，到成为行业专家！我们涵盖了从Python基础到前沿技术的全面知识，包括数据处理、可视化、机器学习和深度学习。通过实战案例，了解Python在金融、医疗和智慧城市中的应用。提供详细学习路径和资源推荐，助你快速进步。无论你是初学者还是有经验的开发者，这篇文章都能帮你在数据驱动的时代脱颖而出。准备好用Python改变世界了吗？点击阅读，开启你的大数据之旅！
如何学习HDFS：糙快猛的大数据之路（ 从基础到前沿）
最新发布
一个8年大数据开发工程师的碎碎念
07-23 1002
HDFS（Hadoop分布式文件系统）是大数据存储的基石。本学习指南涵盖从基础到前沿的全面知识，包括架构、高级特性、性能优化、安全性、与AI/ML的集成，以及在金融、智慧城市等领域的创新应用。通过理论学习、实践操作、源码分析和项目构建，读者将全面掌握HDFS，为在大数据时代脱颖而出做好准备。
安装HBase，并启动运行
12-06
传HBase安装包 将准备好的HBase安装包上传到hadoop0结点的/opt/modules/softwares路径下 二．解压HBase安装包 tar -zxvf hbase-1.2.6-bin.tar.gz 三．配置HBase环境变量 vi /etc/profile文件末追加HBase环境变量信息 Source /etc/profile 四．修改HBase配置信息 1. 修改/opt/modules/softwares/hbase-1.2.6/conf/hbase-env.sh文件，设置JAVA_HOME为实际jdk路径。
Hbase2.x源码分析
百看不如一RUN
09-22 969
0. 前言 目前在国内，使用大数据技术的公司，几乎都会使用HDFS这一技术，在这之上有很多的开源产品，例如Hive、Hbase等，今天我们就来研究一下HBase。 什么是HBase？ HBASE是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，利用HBASE技术可在廉价PC Server上搭建起大规模结构化存储集群。HBASE的目标是存储并处理大型的数据，更具体来说是仅需使用普通的硬件配置，就能够处理由成千上万的行和列所组成的大型数据。HBASE是Google Bigtable的开源实现，但是也有很
hbase 源代码分析 （12） Master和RegionService 启动过程
chenfenggang的专栏
07-16 1998
1）HMaster 是HregionService的实现类。所以启动HMaster会先启动HregionService， 2）HregionService里面启动了很多进程。主要有协处理器，zk，rpc，锁，状态追踪器，wal继承或者类。 3）HMaster会向zk里注册信息。写入当前ServerName，方便Client找到。 4）HMaster 会加载Meta信息到内存。然后等待RegionService的报告，如果没有收到报告，会去zk 询问已经启动但是没有报告的RegionService， 5）HM
HBase源码系列（三）HMaster启动过程
走向程序的康庄大道
11-15 1201
这是HBase server端开始的第一章。在HMaster的构造函数，从方法注释上看到，主要做了两件事情： 1、初始化本地的HRegionServer； 2、启动ActiveMasterManager；public HMaster(final Configuration conf, CoordinatedStateManager csm) throws IOException,
Hbase源码@RegionServer启动
骑猪喝咖啡
05-12 1087
HRegionServer 继承关系 成员变量 private final AtomicLong scannerIdGen = newAtomicLong(0L) Scanner ID生成器 protected MemStoreFlusher cacheFlusher          刷新memstore线程 protected CatalogTracker catalogTr
hbase源码剖析整体思路（目录)
spark_dev的博客
04-08 724
hbase源码剖析 学源码思路：1.先了解这门组件原理 2.打开源码进行阅读 3.源码太多,读哪些内容？读哪些内容：主要是学习源码的目的是学习架构原理，还是为了解决问题。 目的1：为了解决一些bug，可以直接看错误的栈信息，进行分析，如果分析不出来，进行架构学习。 目的2：把控组件执行的整体流程 hbase是个分布式文件系统, 应该学习一下几点 文件系统的通用学习流程: 1.集群架构 2.数据写流程 3.数据读流程 hbase特有的三个动作，了解他们触发时机，而put流程，在特定时间会触发这3个动作： 1
HBase源码走读-(1)HMaster启动过程
maclaren001的专栏
02-26 1669
前记 断断续续使用HBase有2，3年的时间了，由于都是工作驱动，需要用到的时候才重新拿起来，过段时间又忘了差不多了，连最基本的只是还需要度娘和谷歌，感觉挺失败的，和当初希望成为大数据方面的专家背道而驰，越走越远。正好刚离职，有这个闲工夫，想了下还是需要有东西沉淀下来，不然对知识掌握上使用游击战是不行的，还是需要系统的整理这些知识点，一来可以查缺补漏，二来可以将脑中的知识片段捋一捋，更深刻，
第一篇 基于hbase2.4.2源码分析 HMaster启动分析
spark_dev的博客
04-08 712
提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档 基于hbase2.4.2源码分析 HMaster启动分析前言一、HMaster类继承关系二、Hmaster入口分析Hmaster.main()入口2.HMaster.run()总结 前言 1.看什么？ 看HMaster类说明 看main()入口 看初始化了哪些重要组件 如何看：看过程中画图，或者把方法的调用关系，对象的调用按照调用关系记录下来，本文按照第二种方式进行编写 提示：以下是本篇文章正文内容，下面案例可供参考 一、HMas
Hbase2.0-源码阅读环境
Fate is about choice
07-31 464
最近准备开始研究Hbase源码，因为第一次研究源码，所以做片笔记，踩坑踩的很耗时。 1.我用的IDE是IDEA，本地window需要配置JDK,MAVEN,HADOOP环境 2.上GitHub下载Hbase源码（可以使用git或直接下载）：https://github.com/apache/hbase，并解压到电脑 3.在解压后的目录中执行命令： mvn clean package -...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值