开机时监听Hadoop和Zookpeer启动之后再启动Hbase

简介: 开机时监听Hadoop和Zookpeer启动之后再启动Hbase

Hbase的启动依赖于Hadoop和Zookpeer,必须保证先于它们启动才行。在本地调试每次都要重启三个软件非常麻烦。所以写个脚本hbaseStart.sh来解决这个问题

#!/bin/sh
#定义等号的两侧不能有空格
hbaseStart=false
while [ true ]
do
        QuoPM=`jps | grep "QuorumPeerMain"`
        NameNode=`jps | grep "NameNode"`
        DataNode=`jps | grep "DataNode"`
        #if的[  ]判断两边均需要有个空格
        if [ -n "$NameNode" ] &&  [ -n "$DataNode" ] &&  [ -n "$QuoPM" ] && [ "$hbaseStart" = false ]
        then
                  echo "hadoop和zookper启动完毕开始启动hbase..."
                  hbaseStart=true
                  sh /opt/modules/cdh/hbase-0.98.6-cdh5.3.6/bin/start-hbase.sh
        elif [ "$hbaseStart" = true ]
        then
             echo "结束hbase启动的探测..."
             break
        fi
        sleep 0.5
done

vi /etc/rc.local

su - hadoop -c '/usr/local/zookeeper-3.4.6/bin/zkServer.sh start'
su - hadoop -c '/opt/modules/cdh/hadoop-2.5.0-cdh5.3.6/sbin/start-dfs.sh'
su - hadoop -c '/opt/modules/cdh/hadoop-2.5.0-cdh5.3.6/sbin/start-yarn.sh'
/usr/local/shell/hbaseStart.sh

参考链接

https://blog.csdn.net/hexinli/article/details/53040257

https://blog.csdn.net/henni_719/article/details/53674024

https://blog.csdn.net/SunXiWang/article/details/78637746


相关实践学习
lindorm多模间数据无缝流转
展现了Lindorm多模融合能力——用kafka API写入,无缝流转在各引擎内进行数据存储和计算的实验。
云数据库HBase版使用教程
  相关的阿里云产品:云数据库 HBase 版 面向大数据领域的一站式NoSQL服务,100%兼容开源HBase并深度扩展,支持海量数据下的实时存储、高并发吞吐、轻SQL分析、全文检索、时序时空查询等能力,是风控、推荐、广告、物联网、车联网、Feeds流、数据大屏等场景首选数据库,是为淘宝、支付宝、菜鸟等众多阿里核心业务提供关键支撑的数据库。 了解产品详情: https://cn.aliyun.com/product/hbase   ------------------------------------------------------------------------- 阿里云数据库体验:数据库上云实战 开发者云会免费提供一台带自建MySQL的源数据库 ECS 实例和一台目标数据库 RDS实例。跟着指引,您可以一步步实现将ECS自建数据库迁移到目标数据库RDS。 点击下方链接,领取免费ECS&RDS资源,30分钟完成数据库上云实战!https://developer.aliyun.com/adc/scenario/51eefbd1894e42f6bb9acacadd3f9121?spm=a2c6h.13788135.J_3257954370.9.4ba85f24utseFl
目录
相关文章
|
3月前
|
分布式计算 Java Hadoop
java使用hbase、hadoop报错举例
java使用hbase、hadoop报错举例
121 4
|
2月前
|
分布式计算 Hadoop Shell
Hadoop-35 HBase 集群配置和启动 3节点云服务器 集群效果测试 Shell测试
Hadoop-35 HBase 集群配置和启动 3节点云服务器 集群效果测试 Shell测试
80 4
|
2月前
|
SQL 分布式计算 Hadoop
Hadoop-37 HBase集群 JavaAPI 操作3台云服务器 POM 实现增删改查调用操作 列族信息 扫描全表
Hadoop-37 HBase集群 JavaAPI 操作3台云服务器 POM 实现增删改查调用操作 列族信息 扫描全表
38 3
|
2月前
|
分布式计算 Hadoop Shell
Hadoop-36 HBase 3节点云服务器集群 HBase Shell 增删改查 全程多图详细 列族 row key value filter
Hadoop-36 HBase 3节点云服务器集群 HBase Shell 增删改查 全程多图详细 列族 row key value filter
60 3
|
2月前
|
SQL 分布式计算 Hadoop
Hadoop-34 HBase 安装部署 单节点配置 hbase-env hbase-site 超详细图文 附带配置文件
Hadoop-34 HBase 安装部署 单节点配置 hbase-env hbase-site 超详细图文 附带配置文件
97 2
|
2月前
|
存储 分布式计算 Hadoop
Hadoop-33 HBase 初识简介 项目简介 整体架构 HMaster HRegionServer Region
Hadoop-33 HBase 初识简介 项目简介 整体架构 HMaster HRegionServer Region
61 2
|
6月前
|
存储 分布式计算 Hadoop
Hadoop节点文件存储Hbase高可靠性
【6月更文挑战第2天】
109 2
|
2月前
|
分布式计算 Kubernetes Hadoop
大数据-82 Spark 集群模式启动、集群架构、集群管理器 Spark的HelloWorld + Hadoop + HDFS
大数据-82 Spark 集群模式启动、集群架构、集群管理器 Spark的HelloWorld + Hadoop + HDFS
186 6
|
2月前
|
分布式计算 资源调度 Hadoop
大数据-80 Spark 简要概述 系统架构 部署模式 与Hadoop MapReduce对比
大数据-80 Spark 简要概述 系统架构 部署模式 与Hadoop MapReduce对比
78 2
|
2天前
|
存储 分布式计算 大数据
Flume+Hadoop:打造你的大数据处理流水线
本文介绍了如何使用Apache Flume采集日志数据并上传至Hadoop分布式文件系统(HDFS)。Flume是一个高可用、可靠的分布式系统,适用于大规模日志数据的采集和传输。文章详细描述了Flume的安装、配置及启动过程,并通过具体示例展示了如何将本地日志数据实时传输到HDFS中。同时,还提供了验证步骤,确保数据成功上传。最后,补充说明了使用文件模式作为channel以避免数据丢失的方法。
25 4