专栏首页源哥的专栏HBase填坑记1:报错WAL system stuck

HBase填坑记1:报错WAL system stuck

系统报错:WAL system stuck,如下:

出现这种异常,基本可以确定是HDFS不可读写了,一般情况下是IO被打满,或者HDFS存储被打满。

我们检查了HDFS存储,果然发现HDFS存储使用率已经达到了95%。

进一步分析发现,我们当时在做扩容,而扩容后,HBase会自动做数据迁移,迁移的过程中,HBase会自动做major compact,而做major compact的时候,数据量会翻倍,导致HDFS存储使用率超了。

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

我来说两句

0 条评论
登录 后参与评论

相关文章

  • Windows搭建HBase 2.0.2

    4.5 启动成功 出现 Master has completed initialization

    夹胡碰
  • HBase运维:如何逆向修复HBase元数据表

    最近知识星球有人问浪尖,自己的hbase集群元数据丢失了,但是数据还在,是否能够修复,其实这种情况下利用数据的hfile去修复元数据很常见,也有很多时候我们是生...

    Spark学习技巧
  • 使用HBCK2工具修复HBase集群

    HBCK2工具是修复工具,可用于修复Apache HBase集群,包括CDP中的Apache HBase集群。HBCK2工具是Apache HBase hbck...

    大数据杂货铺
  • 深入了解HBase架构

    Spark学习技巧
  • HBase基本数据操作详解 转

    http://blog.csdn.net/u010967382/article/details/37878701

    stys35
  • 20张图带你到HBase的世界遨游【转】

    HBase 是一款面向列存储,用于存储处理海量数据的 NoSQL 数据库。它的理论原型是 Google 的 BigTable 论文。你可以认为 HBase 是...

    sunsky
  • 内含面试|一文搞懂HBase的基本原理

    温馨提示:本文内容较长,如果觉得有用,建议收藏。另外记得分享、点赞、在看,素质三连哦!

    数据社
  • hbase数据原理及基本架构

    hbase是apache hadoop生态系统中的重要一员,主要用于海量结构化数据存储

    用户1217611
  • 初识 HBase

    对大数据领域有一定了解的小伙伴对HBase应该不会陌生,HBase是Apache基金会开源的一个分布式非关系型数据库,属于Hadoop的组件。它使用Java编写...

    端碗吹水

扫码关注云+社区

领取腾讯云代金券