Linux系统安装Hadoop+Hbase+zookeeper

如何在基于linux系统的hadoop集群中,安装配置hbase,hive,zookeeper 配置前提 1,已经在linux虚拟机中,成功搭建了一个hadoop集群 2,已经初步在opt目录下简单解压安装了hbase,hive,zookeeper 以上2点如果没有完成的,请移步: 如何在linux虚拟机中安装hadoop,并搭建hadoop集群 3,准备好MySQL的jdbc的jar包。(版本可以不同) 安装配置zookeeper cd /opt/zookpr 进入zookeeper的安装目录 ... 阅读详情

安装前准备


  1. 修改主机名
    hostname xx 将主机名修改成xx
    hostname 查看主机名
    vi /etc/sysconfig/network 修改配置文件,增加一行HOSTNAME=xx并保存退出
    vi /etc/hosts ip与主机名绑定,hosts文件打开最后面增加:ip地址=xx保存退出,ping xx 进行验证是否绑定成功
  2. 关闭防火墙
    根据需要自行关闭,自行百度。
  3. SSH免密码登录
    执行命令ssh-keygen -t rsa 产生密钥,位于~/.ssh文件夹中 连续回车
    .ssh文件夹下会有两个文件id_rsa id_rsa.pub;
    执行cp id_rsa.pub authorized_keys 此时后文件夹内容:authorized_keys id_rsa id_rsa.pub
    验证方式多样,自己和自己玩,如:ssh localhost 如果成功会提示last login,也就是退出当前用户。
  4. 安装jdk
    注:最好卸载原有的openJdk 可参考:http://www.cnblogs.com/sixiweb/archive/2012/11/25/2787684.html 是否安装相关依赖,各取所需。
    解压,配置环境变量就不一一解说了。

  5. 安装Hadoop
    1~4都是准备工作 当然主机名可以不改,防火墙也可以不关,有需要再关闭也是可以的,互不影响。
    tar -zxvf 安装包名 解压完成后可以通过: mv 解压后文件名 修改的名字 ,来修改文件名,当然不修改也没人强迫,我只是为了简短方便修改了而已,纯属个人爱好。

设置Hadoop环境变量,和jdk环境变量设置方式相似。例:

这里写图片描述
下面进入重要环节,Hadoop需要修改的配置文件

  1. hadoop-env.sh
    export JAVA_HOME=/usr/local/jdk/
  2. 2.core-site.xml内容修改<configuration>
    <property>
    <name>fs.default.name</name>
    <value>hdfs://主机名:9000</value>
    <description>change your own hostname</description>
    </property>
    <property>
    <name>hadoop.tmp.dir</name>
    <value>/usr/local/hadoop/tmp</value>
    </property>
    </configuration>
    这里写代码片`
  3. hdfs-site.xml
<configuration>
    <property>
        <name>dfs.replication</name>
        <value>1</value>
    </property>
    <property>
        <name>dfs.permissions</name>
        <value>false</value>
    </property>
</configuration>

`

Linux下Hadoop(伪分布) + Zookeeper + HBase(一个节点) 部署 下面将介绍,Hbase的部署过程。 前期准备: 1.安装配置好hadoop(我这里是伪分布),并确认能够使用 core-site.xml文件配置如下: fs.defaultFS hdfs://172.16.43.10:9000 dfs.datanode.socket.write.timeout 3000000 dfs.socket.timeout 阅读详情

相关推荐

Linux下Hbase和zookeeper的安装和部署

在Linux虚拟机下的Hadoop集群上配置和安装hbase和zookeeper,

hadoop和zookeeper的安装与配置

hadoop和zookeeper的安装与配置 1. 安装好linux虚拟机、Xshell、Xftp 2. 解压安装jdk、hadoop、zookeeper的压缩包 3. 配置linux主机设置与环境 4. 编写并添加hadoop的配置 5. 编写zookeeper的配置 6. 克隆机器(奇数) 7. 启动集群 ...

G_GUi的博客 4664

Hadoop Hbase Zookeeper系列安装手册

环境介绍:3台虚拟机安装centos6.5 64位、jdk1.7 64位、hadoop2.5.2 64位

四、Linux环境下JDK安装、Hadoop、Zookeeper和HBase集群部署

借助XShell、Xftp工具,在ssh免密已经设置好的基础上,我们实现了在3台虚拟机完成了JDK的安装、Hadoop和HBase的集群部署等操作

m0_70172872的博客 1242

别再到处搜了!高德地图瓦片URL参数(lang、style、ltype)全解析与实战搭配指南

本文全面解析高德地图瓦片URL参数(lang、style、ltype)的核心逻辑与实战应用,提供18种实用参数组合方案,帮助开发者实现从基础到高阶的定制化地图渲染。涵盖语言控制、地图样式、图层类型等关键参数,并分享WebGIS项目中的优化技巧与常见问题解决方案。

weixin_33724046的博客 117

Steger算法(Line_Gauss)-光条中心线提取(基于Hessian矩阵)

Steger算法(Line_Gauss)-光条中心线提取(基于Hessian矩阵)算法背景介绍Hessian 矩阵与泰勒多项式关于求t导数与中心点、亚像素点高斯函数作用文献 算法背景介绍 在线结构光视觉传感器中,由线激光器发射出的线结构光,在本质上为一个连续且具有一定厚度的空间光平面,而在目标表面上所形成的具有一定宽度的光条特征,即为该光平面与目标表面相交而成的交线。在该空间光平面的厚度方向上,光强近似服从高斯分布,因而在摄像机采集到的光条图像中,在沿着光条宽度的方向或光条的法线方向上,其灰度也会呈现出类似

jiangxing11的博客 1万+

四、Linux环境下JDK安装、Hadoop、Zookeeper和HBase集群部署_hbase-3

(先在Server01的XShell界面上完成HBase集群部署,再通过已经配置好的ssh免密,快速实现多台虚拟机的HBase集群部署)在最后两行按dd,删除,然后,按o,粘贴下面内容,按esc+:+wq,保存退出(下面的必须和Hadoop配置的一样)2、在工作中,运维人员经常需要跟运营人员打交道,请问运营人员是做什么工作的?6、Squid、Varinsh和Nginx有什么区别,工作中你怎么选择?6、Squid、Varinsh和Nginx有什么区别,工作中你怎么选择?

535

C++cgal库配置+VS2017

Cgal几何图形库在VS2017上的下载、安装与配置。想要一口气下载完所有安装配件的,可以去文章末尾的链接。httpshttpshttpshttpshttpshttpshttpshttpshttpshttpshttpshttpshttpshttpshttps。

dsn3S的博客 1488

hadoop、zookeeper、hbase在Linux中的安装

1.准备Linux环境 1.0点击VMware快捷方式,右键打开文件所在位置 -> 双击vmnetcfg.exe -> VMnet1 host-only ->修改subnet ip 设置网段:192.168.8.0 子网掩码:255.255.255.0 -> apply -> ok 回到windows --> 打开网络和共享中心 -> 更改适配器设置 -> 右键VMnet1 -> 属性 ->

等风 906

无线网卡选购指南:哪些型号支持Kali Linux的监听模式?附免驱动网卡推荐

本文详细解析了如何在Kali Linux下选购支持监听模式的无线网卡。核心在于选择兼容的芯片组,如Atheros AR9271和Ralink RT3070等经典型号,并提供了免驱动网卡推荐与实战配置指南,帮助安全研究人员和爱好者快速搭建无线测试环境。

wind6的博客 1554

三甲医院网络架构与安全建设实战

华为OceanStor] [华为OceanStor][PACS存储双活] [HIS数据库同步]患者隐私 数据脱敏 天清Web防火墙动态脱敏策略。主数据中心 --[OTV专线]-- 备数据中心。实现医疗业务网/卫生专网/互联网三网隔离。核心业务配置(华为CE6865)自动备份配置(每天02:00)安全事件响应(30分钟SLA)漏洞扫描(每周日00:00)实现医疗物联网统一接入管控。五、等保2.0合规关键配置。堡垒机登录(双因素认证)四、医疗物联网安全方案。

有小小的远大抱负 1911

Linux下部署Zookeeper+Hadoop+Hbase集群

Linux下部署Zookeeper+Hadoop+Hbase集群

独立行走的小黄 938

Unity 热更新技术 |(六)xLua框架学习最新系列完整教程

开始学习热更新方面系列知识,就从这一篇开始吧! 本系列教程 会从热更新基本概念出发,详细介绍热更新相关的全套知识点。 如热更新技术基本原理、热更新主流方案、AssetBundle系列教程、Lua语言编程、Lua与Unity交互教程、Xlua框架使用、热更新实战教程等方面。 热更新作为一个开发者必备技能,如果想学习的话,可以从现在开始了哦~ 接下来先从XLua学习使用 开始学习吧!

努力前行,总会成为自己心中的那道光 1万+

hadoop、zookeeper、hbase、spark集群环境搭建

本文详细讲解如何搭建hadoop、zookeeper、hbase和spark的集群环境,这里我是在本地虚拟机上搭建的集群,但是和实际环境的配置差不多。我会从零开始搭建并且尽量写得详细,所以还会讲到很多配置linux环境的东西,希望大家不要烦,务必按照步骤一步步做下去。 本文主要讲了以下内容: Linux系统的一些基础配置 安装jdk 配置SSH免登陆 hadoop的安装和配置 zookeeper集

Trigl的博客 1万+

SAP Fiori 从技术上而言到底包含哪些组件?

SAP Fiori是企业级UX设计的系统化解决方案,基于五大原则构建:角色导向(Role-based)、自适应(Adaptive)、简洁(Simple)、一致(Coherent)和愉悦(Delightful)。其技术实现包含SAPUI5开发框架、Fiori Launchpad统一入口、OData服务网关等核心组件,通过标准化设计模式与开发工具链,显著提升企业应用的用户体验和开发效率。典型案例显示,遵循Fiori原则可缩短30%以上的操作时长,降低50%的培训成本。该体系既保持跨设备一致性,又支持业务场景的深

2007 年 ~ 2025 年,深耕 SAP 技术 18 年 223

MATLAB库函数unwrap(相位解卷绕)的C语言实现

什么是相位解卷绕 Q = unwrap(P) Q = unwrap(P) corrects the radian phase angles in a vector P by adding multiples of ±2π when absolute jumps between consecutive elements of P are greater than or equal to the default jump tolerance of π radians. If P is a matrix, unw

业精于勤,荒于嬉 4247

Hbase:实验一-在Hadoop集群上配置Hbase

1实验目的 理解HBase的基本概念; 掌握ZooKeeper集群安装步骤; 掌握HBase各种安装配置的步骤。 2实验内容 本实验是在多台安装Linux操作系统的服务器上,并且这些服务器已经安装Hadoop集群,安装分布式HBase集群,让学生掌握搭建HBase的步骤。 3实验知识点 HBase的步骤类型; ZooKeeper集群的安装部署; HBase集群分布式的安装步骤。 4. 实验时长 4学时 5. 实验环境 需要多台服务器,并且该服务器已经安装好HBase集群,并且其中...

m0_62670963的博客 2132

老版QQ原生表情gif动态

这是老版的QQ表情,不过全是动态的的,Windows照片查看器是不会动的,可以右击用浏览器打开查看,再说一遍是老版的,只是分享给宁愿用老版也要动态的人。

hadoop安装教程

本文希望通过部署Hadoop为主线,对Hadoop的框架组成、各部分协同工作的原理、技术细节形成一个初步的认知和了解。

m0_74318316的博客 1786

计算机控制技术及应用

《计算机控制技术及应用》通过总结作者的科研成果和吸收国内外的先进理论、方法和技术,以计算机控制系统的网络化、开放化、智能化和集成化发展趋势为主线索,主要介绍计算机控制系统的基本概念和计算机控制系统的典型形式,计算机控制系统的数学描述与基本分析方法,以及数字PID控制器、最少拍控制系统、达林算法、状态变量设计法等设计方法及其各种改进算法。重点突出计算机控制系统输入输出通道接口的设计方法和典型控制系统的设计案例与实现方法等。

NTscan扫描工具

ntscan是一个扫描器,可以扫描没有密码和弱密码的共享,先到配置文件中填写猜测的用户名和密码,扫描过程中右侧出现的是扫描日志。

虚拟机安装hadoop+hbase+spark+kafka

** 一、虚拟机的安装 1.1安装虚拟机-Linux 1.创建新的虚拟机,选择自定义–>下一步 2.默认选项,直接单击下一步 3.选择稍后安装操作系统–>下一步 4.操作系统选择Linux,版本这里选了Red Hat Enterprise Linux 6 64位,单击下一步 5.更改虚拟机的名称为hadoop01,先在G盘创建hadoop_linux文件,再在其下新建一个文件夹hadoop01,更改安装路径,点击浏览(选择刚刚创建的文件夹)–>下一步 6.每个处理器的内核数量选择2

weixin_50529973的博客 2378

大中型超市收银系统(可直接运行)

光步前台收银系统系统功能:商品销售、商品退货、挂单、收银员权限、会员销售、单品取消、整单取消、商品查询、脱机销售、脱机数据上传,基本资料下载,开钱箱、小票打印、收款结算,支持多币种付款方式(现金、储值卡、礼券、微信等),支持多种促销。运行环境:.net 4.0登陆信息用户名:1001 密码:123456内置商品信息,商品编码可输入00001000 - 00010000,测试效果相关功能键F5 结算 F9挂单 F11商品查询 F8退货 Insert单品取消 Del整单取消 F12开钱箱F2 会员 Ctrl+Z退出系统 Home 锁屏 相关源码待公开

Linux环境下安装Java、Hadoop、Zookeeper、HBase

Java环境、zookeeper环境、hbase环境、Hadoop环境

lou_csdn的博客 610

Hadoop+Hbase+Zookeeper集群环境搭建

hadoop+hbase+zookeeper集群环境搭建配置文档

ada的自留地 743

CentOS7.4伪分布式搭建 hadoop+zookeeper+hbase+opentsdb

一、前期准备 1、配置ip 进入文件编辑模式: vim /etc/sysconfig/network-scripts/ifcfg-ens192 原内容: TYPE=Ethernet PROXY_METHOD=none BROWSER_ONLY=no BOOTPROTO=dhcp DEFROUTE=yes IPV4_FAILURE_FATAL=no IPV6...

weixin_30607029的博客 496

用虚拟机Centos7搭建Hadoop集群

2.6MapReduce配置文件(mapred-site.xml)将脚本复制到/bin中,以便全局调用。同步环境变量配置(root所有者)将公钥拷贝到要免密登录的目标机器上。账号,配置一下无密登录到。账号配置一下无密登录到。账号配置一下无密登录到。

2202_76001567的博客 1660

Linux安装Zookeeper、Hadoop、Hive、Hbase全家桶系列

记录一下zookeeper的路径然后。使用vim进入zoo.cfg。按照提示杀死进程2089。额,这好像是成功了哈哈!这里提供清华大学的镜像站。创建日志/数据文件夹。创建文件夹加文件下载。查看habse源文件。

qq_53679247的博客 1342

Linux Hadoop平台伪分布式安装(Hive on Spark)

Hadoop大数据平台伪分布式安装

wsjslient的博客 1432

Sqoop[02]mysql数据导入hbase(Hadoop2.0)

Sqoop mysql数据导入hbase(Hadoop2.0) 目录Sqoop mysql数据导入hbase(Hadoop2.0)准备环境资源列表Hadoop2.0启动服务虚拟机①、②、③虚拟机①导入HbaseLinux下mysql到Hbase虚拟机① 准备环境 资源列表 本次使用到的软件和应用版本如下 软件/安装包 软件/安装包版本 VMware VMware® Workstation 16 Pro Xshell 6 filezilla 3.7.3 WinSCP 5.17.6

Toozky的博客 595
上一篇: Android 线性布局
小码哥科技
博客等级 码龄10年 2粉丝 11原创
评论 2
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值