前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >Zookeeper应用:HBase的HA简单实现

Zookeeper应用:HBase的HA简单实现

作者头像
dodo_lihao
发布2018-09-12 10:24:14
1.3K0
发布2018-09-12 10:24:14
举报
文章被收录于专栏:懒人开发

简单说明

相对应hadoop的高可用,HBase配置简单很多 HBase中可以启动多个HMaster,通过Zookeeper的Master Election机制保证总有一个Master运行。 配置HBase高可用,只需要启动两个HMaster,让Zookeeper自己去选择一个Master Acitve即可。


简单配置

这里自己用3台机器,在配置好基本的Hbase后(jdk路径等) 我们主要配置hbase-site.xml文件

代码语言:javascript
复制
<property>
    <name>hbase.rootdir</name>
    <value>hdfs://hbase01:9000/hbase</value>
</property>
<property>
    <name>hbase.cluster.distributed</name>
    <value>true</value>
</property>
<property>
    <name>hbase.zookeeper.quorum</name>
    <value>hbase01:2181,hbase02:2181,hbase03:2181</value>
</property>

这里存储,我们用的hadoop的hdfs,自己放置在hbase01这台机器上 再配置对应装有HBase和Zookeeper的集群的主机即可。


测试

启动hadoop,Zookeeper集群,HBase后 我们可以在对应HMaster的60010端口的网页查看状态

启动备用,实现高可用

代码语言:javascript
复制
hbase-daemon.sh start master

HBase启动备用相对简单,执行上面命令,启动即可。 我们到备用HMaster的60010端口的网页查看状态 可以发现是standby的

同样,我们kill掉原来active的HMaster,可以发现standby的变为active。 再次启动kill掉的HMaster,可以发现变为standby


扯淡

感觉HBase才是真正存储海量数据比较理想的工具,hdfs感觉只是个容器罢了。hadoop效率其实也不高,虽然hive写起来方便,但是比起storm,spark,感觉hadoop已经没有上面优势了,只是hadoop的一些组件挺有使用价值的。 HBase难点其实是在LSM树上,感觉红黑树等等的数据结构,才是真正实现的难点,笨笨的自己加油

本文参与 腾讯云自媒体同步曝光计划,分享自作者个人站点/博客。
原始发表:2018.01.02 ,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 简单说明
  • 简单配置
  • 测试
  • 扯淡
相关产品与服务
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档