腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
2
回答
HBase
如何计算同花顺大小?
hbase
我试图更好地理解
HBase
中的
内存
存储刷新算法。我有一个带有1列家族的简单(snappy-压缩)表,并且我按照以下方式配置了
HBase
(在这个区域
服务器
上有几个区域):
hbase
.hregion.memstore.flush.size: 128mibJava堆大小
HBase
RegionServer (字节数):10 Gibhbase.regionserver.global.memstore.upperLimit: 0.4
hbase
.regionserver.glo
浏览 5
提问于2021-05-19
得票数 1
回答已采纳
2
回答
Spark是如何占据
内存
的
apache-spark
如果我的
服务器
有50 If
内存
,那么
Hbase
使用的是40 If。当我运行Spark时,我将
内存
设置为--executor-memory 30G。那么Spark是否会从
Hbase
那里获取一些
内存
,因为只剩下10 grab了。另一个问题是,如果Spark只需要1 1GB
内存
,但我给了Spark 10G
内存
,Spark会占用10 1GB
内存
吗?
浏览 3
提问于2016-02-19
得票数 1
1
回答
与单独安装
HBase
和Hadoop相比,同时安装
HBase
和Hadoop有什么利弊?
hadoop
、
hbase
、
hdfs
、
distributed-computing
我的意思是,有两个选择: 1.在Hadoop集群上安装
HBase
,这也是离线计算,所以只有1个hadoop集群。2.安装一个用于离线计算的Hadoop集群,然后再安装一个仅供
HBase
使用其HDFS的Hadoop集群。这两个选项的优缺点是什么?
浏览 2
提问于2013-07-11
得票数 1
1
回答
如何从
Hbase
中启用Ganglia的新指标?
java
、
hadoop
、
hbase
、
metrics
、
ganglia
如何从
Hbase
0.98向Ganglia启用新的度量标准?
浏览 2
提问于2014-09-16
得票数 1
回答已采纳
1
回答
HBase
将所有行键存储在哪里?
hbase
我在做
hbase
。我有一些问题:谢谢!
浏览 2
提问于2011-08-05
得票数 2
1
回答
HBase
checkAndPut原子性澄清
hadoop
、
concurrency
、
hbase
我只想弄清楚
HBASE
checkAndPut是如何工作的,基于
HBASE
的文档, 原子地检查行/系列/限定符值是否与预期值匹配。如果是的话,它就会添加put。Is 或
HBASE
checkAndPut不隔离任何行,这是否意味着当您在同一行上执行不同时存在的checkAnPut时,都将通过行键进行checkAnPut处理?还是
HBASE
checkAndPut不适合用于检查行的存在?也许只有当一行存在时才是理想的使用,并且只检查家庭/限定符?因为JAVA看起来是这样的。
浏览 2
提问于2019-10-03
得票数 4
回答已采纳
2
回答
Java运行时环境没有足够的
内存
继续
hbase
java
、
hadoop
、
jvm
、
hbase
主节点-3GB
内存
数据节点2-7 GB
内存
Java运行时环境没有足够
浏览 4
提问于2015-09-04
得票数 3
回答已采纳
1
回答
基准测试时间--
HBase
需要刷新新编写的表
hbase
、
benchmarking
我试图确定在
HBase
表上使用列族压缩时的写性能损失。但是,启动刷新(admin.flush(tableName))的API是一个异步的、非阻塞的操作.如何确定将一批Puts刷新到磁盘需要多长时间?更新:我目前的目标是
HBase
0.94.2,因此确认admin.flush是异步的。
浏览 2
提问于2014-03-20
得票数 1
回答已采纳
2
回答
Hbase
memstore和
内存
中的是一样的吗?
get
、
hbase
为什么数据没有立即刷新到文件系统?默认情况下,数据在刷新到文件系统之前在memstore中可用多长时间?对于每次写入,数据将存储在memstore中,就像每次读取一样,数据也将写入memstore/
浏览 0
提问于2013-07-16
得票数 0
1
回答
HBase
的RegionServer碰撞
hadoop
、
jvm
、
hbase
、
hdfs
、
heap-memory
Cloudera
服务器
承载独立配置的
HBase
,这是一个VM,位于与客户端相同的机器上,并由其IP地址标识。该
服务器
的特点是:存储64 4GB,RAM 4GB,CPU 1。客户端与
HBase
服务器
进行通信。 所以这里的问题是,当我试图摄取所有的数据时。客户端只能在区域
服务器
关闭之前创建和插入大约300‘s的数据(创建了大约45个表,并插入了相应的行,然后
服务器
在第46表的数据摄入处崩溃)。我用不同的机器特性测试了所有这些,不同机器的数据大小各不相同(如果机器有更
浏览 2
提问于2017-08-17
得票数 1
2
回答
HBase
MemStore和垃圾数据收集
memory-management
、
hadoop
、
hbase
我是
HBase
的新手,但是我已经设置好了,并且对
HBase
和Hadoop有了一些了解。当我研究
HBase
MemStore时,我对MemStore的理解是"MemStore是
HBase
存放必须写入或读取的数据的
内存
中的位置“。现在我的问题是,memstore的唯一目的是在
内存
中保存可读和可写的数据吗?我们是否可以调整
内存
的大小,以获得
hbase
的快速响应?垃圾收集配置(收集器配置)会影响
内存
存储吗?因为我认为应该是肯定的。
浏览 1
提问于2012-05-15
得票数 4
回答已采纳
1
回答
如何安全地关闭整个
hbase
集群?
hbase
官方文档详细介绍了如何配置和启动
hbase
集群,但是很少提到关闭。我有两种策略来阻止整个集群: 我试过第一个序列,先停止所有区域
服务器
,然后停止主
服务器
。但是这可能会导致一个问题:当您关闭部分区域
服务器
时,主<em
浏览 1
提问于2018-10-17
得票数 1
回答已采纳
1
回答
使用
HBase
API提高
HBase
数据访问性能
hadoop
、
hbase
我正在尝试使用
HBase
表中的前缀筛选器扫描一些行。我上的是
HBase
0.96。
HBase
区域
服务器
/数据节点有足够的CPU和
内存
分配。而且,我的数据平均分布在不同的区域
服务器
上。另外,我带回来的数据不是很多。
浏览 1
提问于2015-04-18
得票数 0
回答已采纳
1
回答
如何计算
HBASE
中的
内存
、WAL和块缓存?
hbase
假设在
HBase
中,我们有3个区域
服务器
、3个区域和2列families.How许多
内存
存储、数据块缓存和WAL是可能的
浏览 1
提问于2020-12-12
得票数 0
2
回答
HBase
中的随机访问性能和HDFS中的数据块大小
hbase
、
hdfs
HBase
可以使用HDFS作为后端分布式文件系统。但是,它们的默认块大小有很大的不同。
HBase
默认块大小为64KB,HDFS默认块大小至少为64MB,至少是
HBase
的1000倍。我知道
HBase
是为随机访问而设计的,所以较小的块大小是有帮助的。但是,当在
HBase
中访问64K的块时,还需要在HDFS中访问一个64MB的块吗?如果是真的,
HBase
能很好地处理极端随机访问吗?
浏览 1
提问于2012-09-18
得票数 12
回答已采纳
1
回答
如何在mapreducer和
hbase
之间拆分
内存
hadoop
、
mapreduce
、
hbase
我有一台有24G
内存
的机器,我想在上面运行hdfs,map-reducer和
hbase
,但我想在map-reducer和
hbase
之间分配
内存
。我希望
hbase
使用最多15G的
内存
和map-reducer来获得最大8G的
内存
。实现这一目标的最佳方法是什么?
浏览 0
提问于2014-01-27
得票数 0
1
回答
如果具有
hbase
表区域的节点下降,会发生什么?
hbase
我们在
HBase
中有一个表,其中有16的预拆分(创建的区域数是16),我们还将一些数据加载到表中,我们可以看到数据是根据我们定义的分割移到不同的区域。 整个区域是否会复制到其他节点,或者它将如何工作?
浏览 3
提问于2014-03-07
得票数 1
回答已采纳
2
回答
如何在一个Java项目中使用多个版本泽西(1.8.x和2.15)?
java
、
maven
、
jersey
、
jersey-2.0
我有两个maven项目: projA和projBprojB依赖泽西岛2.15
hbase
-测试-utils依赖于泽西岛1.8.xprojA使用
hbase
测试实用程序来拆分
内存
中的
hbase
服务器
,该
服务器
下面使用Jersey1.8.x。
浏览 4
提问于2015-02-17
得票数 1
1
回答
在Spark的MLlib中使用TFIDF生成过程中的
内存
不足异常
apache-spark
、
machine-learning
、
classification
、
apache-spark-mllib
在使用MLlib的朴素Baye分类实现创建用于文档分类的TFIDF向量时,我遇到了
内存
溢出问题。 在收集所有术语的idfs时,会出现
内存
溢出和GC问题。为了给出一个规模概念,我从
HBase
中读取了大约61.5万个(约4GB的文本数据)小文档,并运行了带有8核和6GB执行器
内存
的spark程序。我已经尝试过增加并行级别和洗牌
内存
分数,但没有效果。
浏览 1
提问于2014-09-18
得票数 4
回答已采纳
1
回答
监控
HBase
集群
hadoop
、
hbase
、
cloudera
、
opentsdb
我发现
Hbase
提供了各种度量,可以用来监视集群并优化配置参数以获得最佳性能。那么,有人能说出这些度量的含义以及需要考虑的最重要的指标是什么吗?
浏览 3
提问于2016-04-08
得票数 1
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
HBase 导致的一次内存泄漏
服务器内存和普通内存有什么区别?普通电脑能用服务器内存吗?
更换服务器内存
解释桌面台式机内存和服务器内存区别
【HBase笔记】从洗袜子到hbase
热门
标签
更多标签
活动推荐
运营活动
广告
关闭
领券