【大数据运维】大数据常见shell命令

原创已于 2024-03-28 17:53:39 修改 · 663 阅读

10 ·

CC 4.0 BY-SA版权

文章标签：

#运维 #大数据 #debian

于 2024-03-05 16:42:03 首次发布

hadoop运维专栏收录该内容

23 篇文章

订阅专栏

本文详细介绍了Zookeeper的启动、状态检查、客户端命令以及HBase的集群启动/关闭、扩容增加regionserver、下线regionserver的方法，为IT技术人员提供了实用的运维指南。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

文章目录

一、 Zookeeper常用命令
- 1. zk服务命令
- 2. zk客户端命令
二、HBASE常见运维命令

一、 Zookeeper常用命令

例如：ZOOKEEPER_HOME：/opt/zk/zookeeper

1. zk服务命令

1. 启动ZK服务: ${ZOOKEEPER_HOME}/bin/zkServer.sh start  
2. 查看ZK服务状态: ${ZOOKEEPER_HOME}/bin/zkServer.sh status  
3. 停止ZK服务: ${ZOOKEEPER_HOME}/bin/zkServer.sh stop  
4. 重启ZK服务: ${ZOOKEEPER_HOME}/bin/zkServer.sh restart

5.连接shell

连接成功后，如下展示：


bin/zkCli.sh -server 127.0.0.1:2181


bin/zkCli.sh

Connecting to localhost:2181
Welcome to ZooKeeper!
JLine support is enabled

WATCHER::

WatchedEvent state:SyncConnected type:None path:null
[zk: localhost:2181(CONNECTED) 0]

2. zk客户端命令

1.查看某个目录包含的所有文件 
[zk: 127.0.0.1:2181(CONNECTED) 1] ls /

2.查看某个目录包含的所有文件，与ls不同的是它查看到time、version等信息
[zk: 127.0.0.1:2181(CONNECTED) 1] ls2 /

3. 创建znode，并设置初始内容
[zk: 127.0.0.1:2181(CONNECTED) 1] create /test "test"  
Created /test

创建一个新的 znode节点“ test ”以及与它关联的字符串

4. 获取znode的数据  
[zk: 127.0.0.1:2181(CONNECTED) 1] get /test

5. 修改znode内容
[zk: 127.0.0.1:2181(CONNECTED) 1] set /test "ricky"

6. 删除znode
[zk: 127.0.0.1:2181(CONNECTED) 1] delete /test
强制迭代node删除 rmr

7.退出客户端
quit

二、HBASE常见运维命令

1. 集群启动关闭

启动整个集群

启动整个集群前，需要确认集群中各个节点均未启动，如果有个别节点启动，请杀死该进程。

进入一个master节点的服务器

cd ${HBASE_HOME}/bin/
./start-hbase.sh

关闭整个集群

./stop-hbsae.sh

启动单角色进程

${HBASE_HOME}/bin/hbase-daemon.sh start master/regionserver

在整个启动启动以后，需要启动备用的hmaster，就可以进入到备用节点中，使用以上命令，启动备用hmaster服务。

2. 扩容增加regionserver

新增节点增加主机映射/etc/hosts
所有节点配置regionservers文件


编辑/hbase所在目录/conf/regionservers 文件，增加新增节点，保持所有节点的同步更新。

进入新增的节点服务器，运行如下命令，启动regionserver


${HBASE_HOME}/bin/hbase-daemon.sh  start regionserver

3. 下线regionserver ing

编辑/hbase所在目录/conf/regionservers文件，删除要删除的节点。
在master服务器上运行，要删除的节点


${HBASE_HOME}/bin/graceful_stop.sh

进入要删除的节点，确认regionserver是否已经被关闭，如果没有关闭，请等待几分钟，如果还是没有关闭，请重新执行上述操作。或者再进行其他形式的删除。

重新开启负载平衡

在master中，进入hbase客户端

${HBASE_HOME}/bin/hbase shell
balance_switch true
exit