HBASE三种模式环境搭建

Hbase单机模式环境搭建 Hbase单机模式环境搭建 【实验目的】 学会Hbase单机模式配置 理解环境的配置文件 【实验原理】 Hbase单节点配置是在没有多台计算机节点的情况下,对Hbase的分布式存储和计算进行模拟安装和配置。通过在一台计算机节点上解压Hbase安装压缩包后,然后进行Hbase相关文件进行配置,让Hbase运行在一台机器上并实现对数据存储和计算的测试支持。默认情况下,Hbase运行在单机模式下。在单机模式中,Hbase使用本地文件系统,而不是HDFS。 【实验环境】 本次环境是:centos... 阅读详情

解压HBASE的tar包并配置HBASE的环境变量

tar -zxvf hbase-1.3.1-bin.tar.gz -C /training/
    设置环境变量  vi /etc/profile 
            HBASE_HOME=/root/training/hbase-1.3.1
            export HBASE_HOME

            PATH=$HBASE_HOME/bin:$PATH
            export PATH

  更新环境变量:
    source /etc/profile

1、本地模式:  不需要HDFS,保存在Linux的文件系统


        建个目录: mkdir data
        修改文件:hbase-env.sh
            export JAVA_HOME=/root/training/jdk1.8.0_144
        
        核心配置文件:  conf/hbase-site.xml
            <property>
              <name>hbase.rootdir</name>
              <value>file:///root/training/hbase-1.3.1/data</value>
            </property>

        启动HBase:start-hbase.sh
        starting master, logging to /root/training/hbase-1.3.1/logs/hbase-root-master-bigdata111.out
        只有HMaster

2、伪分布模式(bigdata111)

        
        修改文件:hbase-env.sh

            export JAVA_HOME=/root/training/jdk1.8.0_144
            HBASE_MANAGES_ZK    true  ---> 使用HBase自带的ZK
            
        核心配置文件:  conf/hbase-site.xml
        
            <!--HBase的数据保存在HDFS对应目录-->
            <property>
              <name>hbase.rootdir</name>
              <value>hdfs://192.168.157.111:9000/hbase</value>
            </property>    

            <!--是否是分布式环境-->
            <property>
              <name>hbase.cluster.distributed</name>
              <value>true</value>
            </property>            

            <!--配置ZK的地址-->
            <property>
              <name>hbase.zookeeper.quorum</name>
              <value>192.168.157.111</value>
            </property>                

            <!--冗余度-->
            <property>
              <name>dfs.replication</name>
              <value>1</value>
            </property>    
            
        文件regionservers:配置从节点地址
            192.168.157.111   

  3、全分布模式:bigdata112  bigdata113  bigdata114

        修改文件:hbase-env.sh
            export JAVA_HOME=/root/training/jdk1.8.0_144
            HBASE_MANAGES_ZK    true  ---> 使用HBase自带的ZK

        核心配置文件:  conf/hbase-site.xml
        
            <!--HBase的数据保存在HDFS对应目录-->
            <property>
              <name>hbase.rootdir</name>
              <value>hdfs://192.168.157.112:9000/hbase</value>
            </property>    

            <!--是否是分布式环境-->
            <property>
              <name>hbase.cluster.distributed</name>
              <value>true</value>
            </property>            

            <!--配置ZK的地址-->
            <property>
              <name>hbase.zookeeper.quorum</name>
              <value>192.168.157.112</value>
            </property>                

            <!--冗余度-->
            <property>
              <name>dfs.replication</name>
              <value>2</value>
            </property>    

            <!--主节点和从节点允许的最大时间误差-->
            <property>
              <name>hbase.master.maxclockskew</name>
              <value>180000</value>
            </property>    
            
        文件regionservers:配置从节点地址
            192.168.157.113
            192.168.157.114
            
        复制到其他节点上
            scp -r hbase-1.3.1/ root@bigdata113:/root/training
            scp -r hbase-1.3.1/ root@bigdata114:/root/training

HBase环境搭建(单机模式) 前言:HBase的安装有三种方式:单机模式、伪分布式、完全分布式,本文配置的是单机模式。 1、前置条件 安装Hbase之前,需要具备如下三个前置条件。 1、HBase的运行需要jdk; 2、HBSE底层存储以来于HDFS的,因此安装HBase的前提是安装hdoop环境; 3、HBase依赖于ZooKeeper来分布式协调工作,所以需要先有ZooKeeper的环境。如果只是安装单机版hbase,zookeeper使用hbase内置的即可。 2、HBase解压安装 下载hbase(建议下载hbase-1.2.1 阅读详情

相关推荐

HBase分布式集群搭建(2025版):基于Hadoop 3.x,附3种部署模式

单机模式(Standalone Mode)适用场景:本地开发、单元测试、快速原型验证核心特点:所有组件(HBase Master、RegionServer、ZooKeeper)运行在单个JVM进程中,数据存储在本地文件系统,无需Hadoop环境优势:3分钟部署,零配置开箱即用伪分布式模式(Pseudo-Distributed Mode)适用场景:功能测试、性能压测、分布式逻辑验证核心特点:模拟分布式环境,所有组件运行在单节点但独立进程中,数据存储在HDFS,依赖Hadoop伪分布式集群优势。

SuperAGI2025 1018

大数据系列——HBase部署及应用

大数据系列——HBase部署及应用

mql007007的博客 980

HBase搭建

本文详细介绍了HBase完全分布式集群的搭建流程,集群启动与测试,以及常见的HBase Shell操作

m0_62491477的博客 841

HBase架构和部署(超级详细)

在Memstore超过一定的阈值的时候,就要新开一个进程将Memstore flush到storefile中,新的Memstore继续写入接受到的数据,当storefile越来越多时,就会降低读的性能,为了提高读的性能,可以对这些storefile进行compact操作,形多个storefile合并成一个大的storefile,那么compact就需要对HBase的数据进行多次的重新读写,这将产生大量的IO操作,所以Compact操作就是以IO操作来换取后面读的性能。

互联网知识分享 2464

基于N32G003的PMBus从机协议栈设计与STM32F103模拟I2C主机通信实战

本文详细介绍了基于N32G003微控制器设计PMBus从机协议栈,并与STM32F103模拟I2C主机进行通信的实战方案。重点阐述了中断驱动架构、命令解析、CRC8优化及超时恢复机制,实现了在70kHz速率下稳定可靠的工业电源管理通信,适用于服务器电源、通信基站等成本敏感应用场景。

numpy6sculptor的博客 919

计算机组成与系统结构(第三版) 袁春风主编 课后习题答案讲解 第一、二章 计算机系统概述 数据的机器级表示

计算机组成与系统结构(第三版) 袁春风主编 课后习题答案讲解 第一、二章 计算机系统概述 数据的机器级表示

qq_73523062的博客 2096

HBase的安装和配置

HBase的安装和配置

weixin_51568626的博客 6192

【Cadence 17.4实战】----- 基于MySQL与ODBC的企业级CIS数据库配置全攻略

本文详细介绍了如何在Cadence 17.4中配置基于MySQL与ODBC的企业级CIS数据库,提升硬件设计团队的元器件管理效率。通过实战案例和避坑指南,帮助读者掌握数据库部署、ODBC驱动配置及CIS参数映射等关键技巧,实现设计数据的实时同步与高效管理。

weixin_30591551的博客 327

/opt/hbase/conf 中不能启动hbase_HBase三种模式搭建过程详解

HBase的实现有三种模式,单机模式,伪分布式和完全分布式。今天,找空闲时间来总结一下这三种模式的详细的搭建过程。【单机模式】第一步,上传HBase安装包到root目录下(因为hbase中自带zookeeper,会占用2183端口,所以不能和其余zookeeper搭建在一起,所以要将单机版HBase搭在其余机器上)第二步,解压HBase到/opt目录下第三步,配置HBase的环境变量第四步,修改H...

weixin_39557813的博客 321

CCF201803-2 碰撞的小球 python

一些话:已经不知道是第几次做这道题了(大概第三次吧),真的常做常新,每次都有新的细节想法。虽然方法简单粗暴,但好在方便理解,对于我这种菜鸟选手而言。 但在做的过程中,最开始还忽略了输入的小球初始位置有可能是无序的,输出的时候要保持相对位置。CCF真的考验细节,希望上考场时能够认真仔细一点。就酱… #碰撞的小球 #当小球坐标为0或L时,会朝相反方向移动 #当两个小球坐标相等时,会分别转向相反的方向 #计算t秒之后小球的位置 n,L,t = map(int,input().split()) location .

tanya_dre的博客 351

figma MCP + cursor如何将设计稿生成前端页面

Figma MCP配置与代码生成指南 本文详细介绍了如何在Cursor中配置Figma MCP(多上下文处理器)的完整流程:从获取Figma API密钥、设置MCP服务器配置,到添加代码生成规则。关键步骤包括生成Figm a个人访问令牌、配置cursor settings文件、启用MCP服务,以及设置代码规则(包含TypeScript/Vue技术栈规范、BEM命名规则等)。最后提供了将Figma设计稿转化为Vue页面的prompt模板,涵盖文件结构、图片处理、样式规范等具体要求,确保生成代码与设计稿高度一致

weixin_45644355的博客 2909

hbase三种安装模式,本地安装、伪分布安装、集群模式安装

1、hbase介绍    1、数据库技术。NoSQL;2、随机访问,实时读写;3、延迟低;4、构建在hadoop之上2、本地模式安装1.创建本地目录  $&gt; mkdir /home/centos/hbase2.local/standalone模式a)配置JAVA_HOME环境变量(可选) [hbase/conf/hbase-env.sh]        export JAVA_...

hexinghua0126的博客 2240

用Codex自动化挖掘电梯行业外贸客户:从关键词到22维深度分析

在B2B外贸客户开发中,精准定位垂直行业潜在客户是核心挑战。传统手动搜索效率低下,而数据驱动的工作流正成为解决方案。其原理在于将模糊的业务需求转化为机器可识别的结构化查询,通过组合行业核心关键词(如“Elevator Manufacturer”、“Elevator Maintenance”)与商业角色描述,系统性地从海量数据中筛选目标。这种自动化抓取技术的价值在于,它不仅生成客户名单,更通过多维数据分析(如公司规模、业务标签、数字足迹)构建初步的客户画像,为后续的优先级排序和个性化触达提供情报基础。在工业制

weixin_34054866的博客 455

HBase三种搭建方式

HBase三种搭建方式环境变量独立模式伪分布式完全分布式搭建 环境变量 export HBASE_HOME=/hbase路径 export PATH=$PATH:$HBASE_HOME/bin 独立模式 默认模式,HBase不使用HDFS,它使用本地文件系统,他在同一个JVM中运行所有HBase守护进程和本地Zookeeper。Zookeeper绑定到一个中所周知的端口。 编辑hbase/conf下hbase-env.sh,设置JAVA_HOME export JAVA_HOME=/你的jdk存放路径

weixin_46373361的博客 493

【S32K3 MCAL配置】-4.1-CAN Driver:如何解决CAN帧发送丢帧问题

【S32K3 MCAL配置】-4.1-CAN Driver:如何解决CAN帧发送丢帧问题

「汽车电子助手」的博客 1442

大中型超市收银系统(可直接运行)

光步前台收银系统系统功能:商品销售、商品退货、挂单、收银员权限、会员销售、单品取消、整单取消、商品查询、脱机销售、脱机数据上传,基本资料下载,开钱箱、小票打印、收款结算,支持多币种付款方式(现金、储值卡、礼券、微信等),支持多种促销。运行环境:.net 4.0登陆信息用户名:1001 密码:123456内置商品信息,商品编码可输入00001000 - 00010000,测试效果相关功能键F5 结算 F9挂单 F11商品查询 F8退货 Insert单品取消 Del整单取消 F12开钱箱F2 会员 Ctrl+Z退出系统 Home 锁屏 相关源码待公开

HBase的基础与搭建

一、NoSQL的简介和常见的noSQL 1.什么是NoSQL数据库 (*)什么是关系型数据库。基于关系模型提出的一种数据库。 (*)NoSQL数据库:最大特点:保存数据 key-value; 跟关系型数据库最大的区别:NoSQL:不支持事务  (*)常见的NoSQL数据库: (1) HBase:基于Hadoop之上的NoSQL。HBase表--->HDFS的目录 基础HBas

shanmoweiyunjun的专栏 277

蓝牙模块HM-10手册

蓝牙模块HM-10手册,该手册对蓝牙模块HM-10进行了详细的介绍和使用方法以及一些AT指令。

(大数据四)搭建HBase

独立模式 (1)解压hbase1.3.1 命令:tar -zxvf hbase1.3.1 (2)创建软链接 命令:ln -s hbase1.3.1 hbase (3)配置环境变量 命令:sudo vim /etc/profile 内容处置:添加以下内容 HBASE_HOME=~/apps/hbase PATH=$PATH:$HBASE_HOME/bin...

z774884795的博客 182

Outlook Express 6 (OE6) for Win7/Win8/Win10

英文版 Outlook Express6.0, 兼容Win7/Win10/WinXP,解压就可用。

STM32F407中文手册

STM32f407中文手册 本参考手册面向应用开发人员,提供有关使用 STM32F405xx/07xx、STM32F415xx/17xx、 STM32F42xxx 和 STM32F43xxx 微控制器存储器与外设的完整信息。STM32F405xx/07xx、STM32F415xx/17xx、STM32F42xxx 和 STM32F43xxx 构成一个微 控制器系列,各产品具有不同的存储器大小、封装和外设。有关订购信息以及器件的机械与电气特性,请参见数据手册。有关 ARM Cortex™-M4F 内核的信息,请参见《Cortex™-M4F 技术参考手册》。

中配置hbase_HBase三种模式搭建过程详解

HBase的实现有三种模式,单机模式,伪分布式和完全分布式。今天,找空闲时间来总结一下这三种模式的详细的搭建过程。【单机模式】第一步,上传HBase安装包到root目录下(因为hbase中自带zookeeper,会占用2183端口,所以不能和其余zookeeper搭建在一起,所以要将单机版HBase搭在其余机器上)第二步,解压HBase到/opt目录下第三步,配置HBase的环境变量第四步,修改H...

weixin_30193461的博客 648

【HBase】 - 单机模式、伪分布式、完全分布式配置

2019独角兽企业重金招聘Python工程师标准>>> ...

weixin_33953249的博客 563

Apache Hbase 2.x集群部署

hbase简介 Hbase是Hadoop Database的简称 ,Hbase项目是由Powerset公司的Chad Walters和Jim Kelleman在2006年末发起,根据Google的Chang等人发表的论文“Bigtable:A Distributed Storage System for Strctured Data“来设计的。2007年10月发布了第一个版本。2010年5月,Hbase从Hadoop子项目升级成Apache顶级项目。 Hbase是分布式、面向列的开源数据库(其实准确的说是面

IT 681

搭建Hadoop 2.2.0 和 HBase 0.94.14 集成

使用最新的Hadoop集群与HBase搭建一个分布式的运行环境,最新的Hadoop稳定版本是2.2.0,HBase 的稳定版本是0.94.14 ,搭建过程如下: 1. 安装Hadoop          这个步骤,我的blog hadoop集群安装  2. 安装Hbase         HBase 可以用3个模式之一来安装,分别是: 独立模式( Standalo

用心做事 6666

HBase安装

HBASE 英文原文 http://hbase.apache.org/book.html#quickstart 中文翻译 http://abloz.com/hbase/book.html 一、特性 线性和模块化的可伸缩性。 严格一致的读写。 自动和可配置的分片表 区域服务器之间的自动故障转移支持。 使用Apache HBase表支持Hadoop MapReduce作业的方便基类。 易于使用Ja...

天枢的博客 315

Hadoop连载系列之三:HBase分布式安装

1 概述HBase是基于Hadoop的分布式的、面向列的、可拓展的开源数据库。当需要对大数据进行随机的、实时的读写时使用HBase。属于NoSQL。HBase利用Hadoop/HDFS作为其文件存储系统,利用Hadoop/MapReduce来处理HBase中的海量数据,利用Zookeeper提供分布式协作、分布式同步、配置管理等。HBase的架构:LSM - 解决磁盘随机写问...

weixin_33720452的博客 114
上一篇: Linux网卡配置详解
Joy_cj
博客等级 码龄9年 13粉丝 30原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值