腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
有没有办法通过
hbase
客户端API找到主要
压缩
完成状态的完成情况?
hbase
我想要触发
hbase
中所有表的主要
压缩
。使用
hbase
客户端API,可以通过admin.majorCompact(tableName)随时触发主要
压缩
。1)如何判断
压缩
的完成状态,因为
hbase
客户端接口majorCompact是一个异步进程。2)是否必须等到
压缩
过程完成,才能查询
hbase
进行实时处理
浏览 0
提问于2017-09-13
得票数 1
1
回答
如何使用
HBase
shell在Bigtable中设置表
压缩
模式?
compression
、
hbase
、
google-cloud-bigtable
我使用
HBase
shell和常用的create table命令在Bigtable中创建表,您可以在其中指定
压缩
,这显然忽略了
压缩
属性。示例:
hbase
(
浏览 4
提问于2017-05-10
得票数 1
回答已采纳
2
回答
如何处理HDInsight
Hbase
主要
压缩
?当发生主要
压缩
时,无法访问
Hbase
hbase
、
azure-hdinsight
我们已经安装了HDInsight
Hbase
集群,并且我们观察到,虽然正在进行主要的
压缩
,但客户端应用程序无法访问
Hbase
。 请建议处理此场景的最佳实践。
浏览 3
提问于2016-05-19
得票数 0
1
回答
hbase
:对于主要的
压缩
配置没有生效
hbase
、
data-compaction
我已经做了配置:habse.offpeak.end.hour:22,
hbase
.offpeak.start.hour: 18.
hbase
.hregion.majorcompaction: 86400000,但是
hbase
仍然在随机时间做主要
压缩
,比如:9:00 ,13:55等等。你能告诉我如何配置
hbase
做主要
压缩
在非高峰时间。
浏览 3
提问于2021-11-26
得票数 0
2
回答
HBase
键值
压缩
?
hadoop
、
hbase
、
hdfs
、
hadoop-plugins
在开始之前,我想告诉您,我对Hadoop &
HBase
非常陌生。到目前为止,我发现Hadoop非常有趣,并希望在未来做出更多的贡献。 我主要感兴趣的是改进
HBase
的性能。为此,我修改了
HBase
的/io/hfile/Hfile.java中的/io/hfile/Hfile.java方法,使其能够完成高速缓冲数据汇编,然后直接写入Hadoop,以便以后可以由
HBase
加载。现在,我想出一种
压缩
键值对的方法,这样就可以节省带宽。我做了很多研
浏览 7
提问于2011-06-20
得票数 0
4
回答
如何对现有的
Hbase
表启用
压缩
?
compression
、
hbase
我有一个非常大的
Hbase
表apData,但是它在创建时没有被设置为
压缩
。现在是1.5 it。所以我想在这张桌子上启用
压缩
功能。我应该如何
压缩
表,并确保未来的数据将自动
压缩
时,它被插入。 提前感谢!
浏览 8
提问于2015-05-15
得票数 3
回答已采纳
1
回答
Hbase
批量负荷HFiles周期性和小压实关系
hbase
、
hfile
在进行测试时,我观察到即使在区域中有超过3个文件之后,也不会立即触发轻微的
压缩
。这可能会导致存在大量文件的问题,这些文件保存的是同一行键的行。我已经看到在10000秒后(大约2小时,45分钟)被唤醒的
压缩
线程正在开始
压缩
并将
压缩
任务放到队列中。是否有任何配置可以告诉您,在由批量加载(完全负载)编写的3个或更多hFiles时立即触发轻微的
压缩
,而不考虑HFile的大小?
Hbase
版本:
HBase
1.1.2.2.6.5.4-1 <e
浏览 1
提问于2019-12-31
得票数 0
回答已采纳
1
回答
Hbase
是柱状DB吗?
hbase
Hbase
表基于列族,这意味着每一列都是元组--每一列都存储在一起。
HBase
列族是存储在一起的事实,它是否降低了效率,还是
HBase
做了一些聪明的技巧来保持列的性质?
浏览 5
提问于2017-04-12
得票数 2
回答已采纳
1
回答
上传到
Hbase
后数据大小减小
linux
、
hadoop
、
nosql
、
hbase
当文件作为记录从linux机器上传到
Hbase
表时,我们观察到数据大小的减少(文件系统上为10 GB,
Hbase
表中为6-8 GB )。在
hbase
表上没有使用
压缩
方法,主要
压缩
也被禁用。
浏览 47
提问于2021-06-23
得票数 0
1
回答
批量加载迁移时的区域拆分
hbase
、
regions
在从RDBMS到
Hbase
的批量数据迁移过程中,会不会出现过频繁的区域拆分?如果它发生的次数更多,那么它肯定会影响写入和读取性能。 我知道预分割可以在一定程度上避免这个区域的分裂。但在我们的产品设计中,首先我们将在
Hbase
中单独写入新数据(可能需要6个月),一旦
Hbase
系统稳定了对新数据的读写,将开始将数据从RDBMS迁移到
Hbase
。
浏览 3
提问于2016-11-18
得票数 0
2
回答
HBase
: major_compact未正常工作
database
、
hadoop
、
hbase
、
bigdata
当我在Apache
HBase
中运行主要
压缩
时,它不会删除标记为删除的行,除非我首先完全重新启动
HBase
。., INC 然后,我运行命令major_compact 'myTable'并等待几分钟,以便主要
压缩
在后台完成。然后,当我再次执行扫描时,行和tombstone标记仍然存在。但是,如果我重新启动
HBase
并运行另一个主要
压缩
,行和逻辑删除标记就会消失。简而言之,只有在运行主要
压缩
之前重启
HBase
,major_compact
浏览 0
提问于2014-08-04
得票数 0
5
回答
如何监测
hbase
的主要压实度
java
、
hbase
我要监测
hbase
的主要压实情况。每一张桌子我都想知道 通过UI?一般来说,我应该监测哪些额外的参数来检测是否需要主要的
压缩
?
浏览 4
提问于2012-11-13
得票数 7
回答已采纳
1
回答
hbase
压缩
文件大小是多少
java
、
hadoop
、
hive
、
hbase
、
apache-pig
我最近读到,在
Hbase
主要
压缩
后,如果存储文件的大小超过
hbase
.hregion.max.filesize,即256MB,那么它再次被分成2。所以有人能解释
压缩
是在多大的文件上进行的吗?在主要
压缩
之后形成的存储文件将包含多少列族的数据?
浏览 0
提问于2014-07-19
得票数 1
1
回答
在HDP群集上安装Snappy
hadoop
、
compression
、
hbase
、
hortonworks-data-platform
、
snappy
我有一个使用Hortonworks数据平台2.6.1构建的
HBase
集群。现在,我需要对
HBase
表应用快速
压缩
。
hbase
org.apache.hadoop.
hbase
.util.
浏览 1
提问于2017-10-31
得票数 0
回答已采纳
2
回答
如何在Java中获取
Hbase
表的HFiles个数?
hbase
我有一张
HBase
桌子。我对表执行了
HBase
主要
压缩
。如何在Java中动态获取
Hbase
表的HFiles数量?
浏览 2
提问于2016-10-24
得票数 0
1
回答
在
HBASE
中更改表结构而不禁用表的含义
hbase
我在学
HBase
Thankyou
浏览 2
提问于2015-11-13
得票数 3
回答已采纳
1
回答
如何使用Sqoop libjars选项?
sqoop
我使用sqoop导入工具将数据导入到
HBASE
表中。我已经创建了一个自定义的PutTransformer类,并且我使用了jar和属性来使用自定义转换器,但是它没有考虑自定义转换器类。 有人能帮我吗。/ -libjars /home/ghk/
hbase
/poc/customsqoop.jar -D --连接‘jdbc:poc:瘦:@//XX.XY.XA.XZ:1521/A 701’-表XYZ.TEMP_
HBASE
_TYPE2-列的TID、
HBAS
浏览 8
提问于2013-10-07
得票数 1
5
回答
单节点上的
hbase
安装
hadoop
、
hbase
现在,我正在尝试在其上安装
hbase
(0.94.18版)。但是我得到了以下错误(尽管我已经将其解
压缩
到/usr/local/
hbase
中): Error: Could not find or load main class org.apache.hadoop.
hbase
.util.HBaseConfToolError: Could not find or load main class org.apache.hadoop.
hbase
.zookeeper.ZKServ
浏览 1
提问于2014-05-11
得票数 3
1
回答
HBase
压缩
如何影响客户端?
hbase
、
downtime
我确实知道
hbase
压缩
的基础知识,即它在HFiles上是如何工作的。但是,我很好奇,在两次
压缩
(次要和主要)期间,其他服务会发生什么情况,这会是
hbase
的停机时间吗?也就是说,在
压缩
时,如果客户端运行get或put查询怎么办?在
压缩
过程中,该查询是否会得到响应或挂起?谢谢, Vikash
浏览 10
提问于2018-05-30
得票数 0
1
回答
柱状数据库--可以查询(聚合)
压缩
数据
database
、
nosql
、
hbase
、
amazon-redshift
我想在
压缩
数据上运行这些查询,因为它们将提供更好的性能,我们可以完全跳过解
压缩
。我目前正在使用
Hbase
的聚合客户端,它看起来像是(还没有检查源代码yet...can是错误的),
Hbase
使用它的b树索引查找行键,解
压缩
该块并按顺序读取数据。有办法跳过解压过程吗?如何使
HBase
只通过处理
压缩
数据来计算计数。如果这是不可能的,是否还有其他列db提供此功能。
浏览 4
提问于2014-03-01
得票数 1
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
【HBase笔记】从洗袜子到hbase
【HBase大爆炸】HBase之常用Shell命令
Spark On HBase
走进Hbase
HBase原理
热门
标签
更多标签
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
活动推荐
运营活动
广告
关闭
领券