首页
学习
活动
专区
工具
TVP
发布

大数据平台TBDS

完全兼容hadoop体系的商业化、完备化和企业化大数据平台
专栏作者
26
文章
146386
阅读量
130
订阅数
hbase因为数据空洞故障导致读写缓慢
腾讯云某客户的开发者反馈,大数据集群的hbase读写非常缓慢。我们使用测试程序,也复现该问题。因此,我们需要对hbase集群进行全面检测。
mikealzhou
2018-10-29
6.9K1
WAL文件过多导致hbase master无法启动
近期腾讯云某家大客户的hbase master一直无法启动,经过仔细诊断之后发现是由于hbase的WAL文件非常多(达到15TB),导致hbase在zk的节点(存储WAL文件信息的节点)超过4096*1024 默认大小,无法正常提供服务。因此,hbase master无法正常启动。通过增加zk节点的大小参数,并且优化WAL文件,最终解决该问题。
mikealzhou
2018-10-10
2.6K0
Regionserver频繁挂掉故障处理实践
近期腾讯云的一家大客户频繁出现HBase regionserver 挂掉,影响业务正常使用。通过调整堆栈大小、gc优化、超时时间等都无法解决该问题。经过细致并综合分析hbase regionserver、hbase master以及 zookeeper的日志,发现了问题所在:tickTime设置导致hbase超时时间错误。
mikealzhou
2018-01-28
7.3K4
利用Flume 汇入数据到HBase:Flume-hbase-sink 使用方法详解
本文作者将会详细描述这两大类HBaseSinks 对应的三种序列化模式的使用方法。
mikealzhou
2018-01-20
5.7K1
Flume-Hbase-Sink针对不同版本flume与HBase的适配研究与经验总结
导语:本文细致而全面地讲解使用flume输出数据到HBase的三种不同 Flume-Hbase-Sink 之间的差异性,以及技术细节。并且透彻而全面地总结了不同版本flume和HBase之间的兼容性问题。 为了更加详细说明三种不同hbasesink的差异性,本文在附录附上详细的源码解读。
mikealzhou
2018-01-20
4.4K0
没有更多了
社区活动
腾讯技术创作狂欢月
“码”上创作 21 天,分 10000 元奖品池!
Python精品学习库
代码在线跑,知识轻松学
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档