【大数据运维】大数据常见shell命令

发布时间:2026/11/3 18:17:38
【大数据运维】大数据常见shell命令

文章目录

  • 一、 Zookeeper常用命令
    • 1. zk服务命令
    • 2. zk客户端命令
  • 二、HBASE常见运维命令
    • 1. 集群启动关闭
    • 2. 扩容增加regionserver
    • 3. 下线regionserver ing

一、 Zookeeper常用命令

例如:ZOOKEEPER_HOME:/opt/zk/zookeeper

1. zk服务命令

1.启动ZK服务:${ZOOKEEPER_HOME}/bin/zkServer.sh start2.查看ZK服务状态:${ZOOKEEPER_HOME}/bin/zkServer.sh status3.停止ZK服务:${ZOOKEEPER_HOME}/bin/zkServer.sh stop4.重启ZK服务:${ZOOKEEPER_HOME}/bin/zkServer.sh restart

5.连接shell

连接成功后,如下展示:

bin/zkCli.sh-server127.0.0.1:2181 bin/zkCli.sh Connecting to localhost:2181 Welcome to ZooKeeper!JLine support is enabled WATCHER:: WatchedEvent state:SyncConnected type:None path:null[zk: localhost:2181(CONNECTED)0]

2. zk客户端命令

1.查看某个目录包含的所有文件[zk:127.0.0.1:2181(CONNECTED)1]ls/2.查看某个目录包含的所有文件,与ls不同的是它查看到time、version等信息[zk:127.0.0.1:2181(CONNECTED)1]ls2 /3. 创建znode,并设置初始内容[zk:127.0.0.1:2181(CONNECTED)1]create /test"test"Created /test 创建一个新的 znode节点“test”以及与它关联的字符串4. 获取znode的数据[zk:127.0.0.1:2181(CONNECTED)1]get /test5. 修改znode内容[zk:127.0.0.1:2181(CONNECTED)1]set/test"ricky"6. 删除znode[zk:127.0.0.1:2181(CONNECTED)1]delete /test 强制迭代node删除 rmr7.退出客户端 quit

二、HBASE常见运维命令

1. 集群启动关闭

启动整个集群

启动整个集群前,需要确认集群中各个节点均未启动,如果有个别节点启动,请杀死该进程。

进入一个master节点的服务器

cd${HBASE_HOME}/bin/ ./start-hbase.sh

关闭整个集群

./stop-hbsae.sh

启动单角色进程

${HBASE_HOME}/bin/hbase-daemon.sh start master/regionserver

在整个启动启动以后,需要启动备用的hmaster,就可以进入到备用节点中,使用以上命令,启动备用hmaster服务。

2. 扩容增加regionserver

  1. 新增节点增加主机映射/etc/hosts
  2. 所有节点配置regionservers文件
编辑/hbase所在目录/conf/regionservers 文件,增加新增节点,保持所有节点的同步更新。
  1. 进入新增的节点服务器,运行如下命令,启动regionserver
${HBASE_HOME}/bin/hbase-daemon.sh start regionserver

3. 下线regionserver ing

  1. 编辑/hbase所在目录/conf/regionservers文件,删除要删除的节点。
  2. 在master服务器上运行,要删除的节点
${HBASE_HOME}/bin/graceful_stop.sh

进入要删除的节点,确认regionserver是否已经被关闭,如果没有关闭,请等待几分钟,如果还是没有关闭,请重新执行上述操作。或者再进行其他形式的删除。

  1. 重新开启负载平衡

在master中,进入hbase客户端

${HBASE_HOME}/bin/hbase shell balance_switchtrueexit