腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
3
回答
我的Spark程序的处理时间不会随着集群中
节点
数量的
增加
而减少
、
、
我有一个带有3个
节点
的Cloudera集群,其中安装了Apache Spark。我正在运行一个Spark程序,该程序从
HBase
表中读取数据,转换数据并将其存储在不同的
HBase
表中。对于3个
节点
,500万行
HBase
数据所用的时间大约为1分10秒。在减少或
增加
节点
数量时,所用的时间相似,而
增加
节点
数量后预计会减少,而
增加
nodes.Below的数量会
增加
所用的时间: 1) 3个
节点</em
浏览 2
提问于2016-08-26
得票数 0
1
回答
区域服务器不在Hadoop2.0分布式集群上运行
、
、
启动
hbase
集群时,我面临以下错误 2015-05-15 16:58:31,741 WARN [regionserver60020- SendThread(hbasenamenode:2181at org.apache.hadoop.
hbase
.regionserver.HRegionServer.blockAndCheckIfStopped(HRegionServer.java:783)at org.apache.hadoop.
hbase
.regionserver.HRegionServer.initializeZooKee
浏览 6
提问于2015-05-07
得票数 0
1
回答
使用
HBase
API提高
HBase
数据访问性能
、
我正在尝试使用
HBase
表中的前缀筛选器扫描一些行。我上的是
HBase
0.96。
HBase
区域服务器/数据
节点
有足够的CPU和内存分配。而且,我的数据平均分布在不同的区域服务器上。另外,我带回来的数据不是很多。我注意到,当我向表中添加更多数据时,请求所需的时间就会
增加
。当请求数量
增加
时,它也会
增加
。 谢谢你的帮
浏览 1
提问于2015-04-18
得票数 0
回答已采纳
1
回答
Hbase
合并后区域为何再次拆分
、
hbase
(main):067:0> version我有一个有12个
节点
的
hbase
设置,其中一个表有36个区域,分布在11个
节点
上,我在线合并了连续的区域(使用merge_region),并生成了18个区域。在那之后,一个小的压缩开始了,区域再次分裂,区域的数量
增加
到32个。为什么会发生这种情况,如何跟踪和理解这种行为?
浏览 11
提问于2018-02-05
得票数 0
1
回答
添加
Hbase
区域服务器(Cloudera CDH)的影响
、
、
我在集群中运行了几个
HBase
节点
。最近,集群中添加了一个新
节点
。 我不知道这个新的区域服务器会产生什么影响。这个
节点
会有数据吗?我是否需要对数据进行压缩以填充这台机器?还是简单的
增加
服务,火灾和遗忘?
浏览 4
提问于2015-10-28
得票数 1
回答已采纳
2
回答
Hbase
性能
、
、
、
我正在使用Spring + Datanucleus JDO +
Hbase
。
Hbase
处于完全分布式模式,有两个
节点
。我在这里面临着严重的性能问题。我的主要配置是: Zookeeper仲裁大小:1
HBase
区域服务器:2个数据
节点
:2个
hbase
.zookeeper.property.maxClientCnxns: 400复制因子:3 是否需要
增加
Hbase
的堆大小?似乎写入文件要比写入数据到
Hbase
更快。这是我在
Hbase
浏览 4
提问于2011-08-30
得票数 3
回答已采纳
2
回答
Hbase
地区数量持续增长
、
、
我们正在使用
hbase
版本1.1.4。DB有大约40个表,每个表数据都指定了一个TimeToLive。它部署在一个5
节点
集群上,下面是
hbase
-site.xml<name>phoenix.query.threadPoolSize</name><name>
hbase
.hregion.memstore.block.multiplier
浏览 0
提问于2017-01-31
得票数 0
回答已采纳
3
回答
增加
Hadoop 2中的蜂巢映射器数目
、
、
、
、
我从Hive创建了一个
HBase
表,并试图对其进行简单的聚合。这是我的蜂巢查询:select col1, count(1) 地图减少作业只产生两个映射器,我想
增加
这一点。使用简单的地图减少作业,我将配置纱线和映射器内存,以
增加
映射器的数量。yarn.nodemanager.resource.memory-mb=32768;set mapreduce.map.memory.mb=204
浏览 0
提问于2015-05-13
得票数 9
2
回答
创建
hbase
数据库
我是
hbase
的新手..在
hbase
中创建表时出现一些错误11/05/01 12:40:47 DEBUG zookeeper.ZooKeeperWrapper$_dot_dot_.bin.hirb.method__7$RUBY$create(hirb.rb:324) at usr.local.
浏览 0
提问于2011-05-01
得票数 2
1
回答
1个Hadoop和
Hbase
大簇与1个Hadoop簇+1个
Hbase
簇
、
Hadoop将通过从
Hbase
读取数据并将数据写入
Hbase
来运行许多作业。假设我有100个
节点
,那么有两种方法可以构建Hadoop/
Hbase
集群: 哪种
浏览 4
提问于2014-04-19
得票数 1
回答已采纳
2
回答
使用Thrift扩展群集上的
HBase
写入
、
、
我们正在尝试使用Thrift扩展集群上的
HBase
写入。(我们的
HBase
应用程序是用Python语言编写的,因此需要Thrift。)如果在#1或#2上,客户端或
HBase
主机会负责将请求拆分到各个区域服务器吗?我可以做到这一点,但它似乎违背了使用
HBase
的目的。 任何其他关于读/写缩放的
浏览 0
提问于2012-06-16
得票数 2
回答已采纳
1
回答
HBASE
多
节点
集群设置问题
、
、
、
我有3个
节点
作为主
节点
、slave1
节点
、slave2
节点
,并试图在上面的集群中安装
HBASE
。我已经在主
节点
中启动了HABSE,但是我看到守护进程没有在从
节点
中运行,是否也需要在从
节点
中发出start have命令?导出JAVA_HOME=/opt/jdk1.8.0_151/master slave1 slave2
hba
浏览 1
提问于2020-08-15
得票数 0
回答已采纳
1
回答
java net连接异常,无法从
hbase
接收数据:在Nifi中连接被拒绝
使用
Hbase
处理Nifi。在这篇文章中,我从
Hbase
获取数据,使用Gethbase处理器并将数据发送到Nifi.But中的Putfile处理器。我在Nifi .Any建议中收到错误消息“由于java net连接异常,无法从
Hbase
接收数据:连接被拒绝”请
浏览 1
提问于2016-05-04
得票数 0
6
回答
org.apache.hadoop.
hbase
.PleaseHoldException:主机正在初始化
、
、
我正在尝试设置
Hbase
的多
节点
集群。但是当我尝试在
hbase
shell上创建表时。它会给出一个错误 at org.apache.hadoop.
hbase
.ipc.HBaseClient.call(HBaseClient.java:974) at org
浏览 1
提问于2013-06-11
得票数 17
回答已采纳
1
回答
HBase
旧not、PV2-(序列号).log未清除
、
、
hdfs上的旧file目录似乎只被部分清理,(相当小的)pv2(序列号).log文件不断
增加
(大约每小时添加一个文件) 哪个主进程应该清理这些特定的文件?这些pv2日志文件的用途是什么?设置:
hbase
znode对等
节点
下zookeeper中的
hbase
.master.logcleaner.ttl=60000为空复制为false
浏览 0
提问于2020-06-25
得票数 0
2
回答
Cassandra适合写入,读取较少,
HBASE
随机读写
、
Cassandra适合写入,读取较少,而
HBASE
适合随机读取和写入,这对吗?听说facebook用
HBASE
取代了Cassandra
浏览 1
提问于2014-05-02
得票数 1
1
回答
在
HBase
中截断表不会为HDFS释放空间。
、
、
、
我在使用
HBase
和HDFS时遇到了问题,因为我知道
HBase
运行在HDFS之上,因此我认为它使用HDFS来存储数据。问题是HDFS接近其最大空间利用率,并且它和
HBase
不断崩溃。在相当长的一段时间内,我甚至不能运行正常的
HBase
外壳命令,比如list和scan,所以我甚至不能尝试从表中删除一些数据。但是,当我设法重新启动在单个
节点
上运行的
HBase
时,我截断了使用该最大空间量的表,并且当我通过du (磁盘使用)命令检查时,hdfs目录甚至更大。而且HDFS空间利用率仍然非常高。如果
浏览 59
提问于2021-08-23
得票数 0
回答已采纳
1
回答
三
节点
hadoop集群中的
Hbase
安装
、
我已经安装了我的hadoop三
节点
集群(master、slave1和slave2)。我想安装
Hbase
完全不信任模式。
浏览 3
提问于2015-04-01
得票数 0
1
回答
HBase
和扩展读取
、
、
、
我有一个复制因子为3的
HBase
集群。我正在努力提高读取性能,这样我就可以有更多的'Get's /秒。当我对Gets (reads)进行基准标记时,我使用htable池建立了一个到
HBase
的连接,并连接到一个表。然后,我以更快的间隔一遍又一遍地读同一行,并监视集群负载。群集中的所有
节点
都具有相同的硬件。我注意到的是,当启动时,单个
节点
上的CPU负载。假设我用复制因子3配置了集群,我假设读取将在任何数据副本上执行,而不是在单个
节点
上的单个副本上执行(我希望看到3台服务器的负载
浏览 0
提问于2012-03-01
得票数 0
回答已采纳
1
回答
hadoop纱线资源管理
、
、
我有一个包含10个
节点
的Hadoop集群。在10个
节点
中,有3个
节点
部署了
HBase
。有两个应用程序共享集群。应用程序1从hadoop HDFs写入和读取数据。应用程序2将数据存储到
HBase
中。yarn中有没有一种方法可以确保由应用程序1启动的hadoop M/R作业不会使用
Hbase
节点
上的插槽?我只希望应用程序2启动的
Hbase
M/R作业使用
HBase
节点
。这是为了确保有足够的资源可供应用
浏览 2
提问于2014-04-05
得票数 0
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
HBase单节点下JavaAPI连接
HBase快速入门之单一节点安装
oracle 11gR2 rac删除节点和增加节点
随着区块链变大,完整的节点数量增加
【HBase笔记】从洗袜子到hbase
热门
标签
更多标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
活动推荐
运营活动
广告
关闭
领券