腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
添加更多
hbase
服务器而不添加更多hdfs服务器是否有益?
hbase
、
hdfs
、
eucalyptus
我正在使用Eucalyptus,并且正在考虑将hdfs和
hbase
放在我们的节点控制器上。在我们的一些实例上运行
hbase
会提
高性能
吗,或者它是冗余的?
浏览 0
提问于2011-05-21
得票数 0
1
回答
配置单元查询需要很长时间来获取20 gb的记录
hadoop
、
hive
、
hbase
、
hiveql
嗨,我在
HBASE
上有一个有200 Hi记录的蜂窝表。我正在运行简单的配置单元查询来获取20 gb的记录。但这需要大约4个小时的时间。我无法在HIVE表上创建分区,因为它集成在
HBASE
上。请提供任何提
高性能
的建议INSERT OVERWRITE LOCAL DIRECTORY '/hadoop/user/m6034690/FSDI/FundamentalAnalyticFundamentalAnalytic_2014.txt' ROW FORMA
浏览 0
提问于2016-11-30
得票数 1
1
回答
HBase
独立性能与在HDFS集群上运行的比较
hadoop
、
hbase
、
hdfs
我的应用程序连接到
HBase
,并进行大量通信(每秒读取/写入数百或数千次)。这会严重影响性能,这可能是由于
HBase
对每个请求执行的I/O操作。目前,我只在独立模式下进行测试,在这种模式下,
HBase
使用本地文件系统存储数据。我想知道,在分布式模式下使用一个实际的HDFS是否会显着地提
高性能
,还是只会产生相同的结果。我试图在失去太多的时间来建立和运行一个集群之前,得到一个线索。我问自己的第二个问题是,是
浏览 2
提问于2015-04-07
得票数 5
3
回答
Hadoop/
Hbase
批量加载性能提升
hadoop
、
mapreduce
、
hbase
我正在通过hadoop多节点集群中的importsv工具将1000万条记录加载到
Hbase
表中。现在这项任务需要5分钟。但我想知道我如何才能提高它的性能。我想知道我是否可以强制使用reducers,它可以提
高性能
,或者任何其他你认为可以提
高性能
的方法都会受到感谢。 谢谢。
浏览 2
提问于2012-07-12
得票数 0
回答已采纳
3
回答
用于频繁扫描行的
HBase
连接池
java
、
hbase
for (Result item : result) { }我想知道是否可以实现一些连接池来提
高性能
在
HBase
Java中是否有可用的池机制。我使用的是0.96.x版本的
HBase
。另外,是否有任何可以提
高性能
的配置设置。谢谢
浏览 3
提问于2014-09-14
得票数 1
回答已采纳
1
回答
为基于位置的条目设计
HBase
表(模式)
hbase
在为基于位置的条目设计
HBase
表(架构)时需要一些要点或建议,即按以下方式获取数据2. Country4. Cities 5.
浏览 1
提问于2018-02-15
得票数 0
回答已采纳
1
回答
HBase
多线程客户端性能
multithreading
、
hbase
、
ipc
我们在伪分布式模式下使用
hbase
1.2.4和java api读取信息。我们的客户端向
hbase
发送了20k rps,但它只加载了30%的cpu,并且计算需要大约5个小时。我还尝试使用
hbase
客户端的ipc池选项,但它并没有太多地提
高性能
。如果任何人有类似的问题,请给我一些建议。
浏览 3
提问于2017-03-21
得票数 0
1
回答
LeaseException查询EMR集群时发生的Tomcat 7错误
tomcat
、
hbase
、
elastic-map-reduce
当使用Tomcat服务器和
Hbase
作为数据库连接到EMR集群时,我得到了以下错误。我已经做了在上建议的修改,我还重新启动了建议的集群,如: 类型异常报告 消息org.apache.hadoop.
hbase
.regionserver.LeaseException: org.apache.hadoop.<
浏览 4
提问于2013-11-26
得票数 0
回答已采纳
1
回答
如何提高
Hbase
中巨大(1000万条记录)小(平均240字节)记录大小的随机get操作的性能?
hbase
、
performance-testing
、
random-access
我有一个
Hbase
表,它有四个列族(共10列),主键是一个固定的10字节id.The平均行大小为240 10bytes。当我在
HBase
中测试有100万行的随机get操作时,它平均得到1000多行/s,0.25MB/s。但是,当我用一千万行测试相同的操作时,它得到160行/s,0.04MB/s,在阅读了一些资料后,我将
HBASE
_HEAPSIZE从1G增加到5G,之后得到了320行/s,0.08MB/s(缓存命中率为87%它有什么方法来提
高性能
吗?谢谢。
浏览 3
提问于2014-03-03
得票数 0
回答已采纳
1
回答
使用RDD索引扫描星火库中的Hadoop数据库表
apache-spark
、
hbase
、
pyspark
、
rdd
我把table1作为RDD,而table2在
HBase
中。
浏览 7
提问于2017-04-21
得票数 0
回答已采纳
1
回答
为什么Ambari 1.7中的Nagios和Ganglia被Ambari 2.0中的Ambari Metrics取代
nagios
、
ambari
、
ganglia
我是ambari的新手,我想知道为什么ambari 1.7版本中的Nagios和Ganglia在ambari 2.0+中被"ambari metrics“取代?有什么明显的优势吗?
浏览 2
提问于2016-05-02
得票数 0
1
回答
将数据查询到
HBase
并与配置单元集成会对性能产生影响
hbase
、
hive
、
sqoop
我们将oracle表sqooping到
HBase
,并在Hive中创建映射表,似乎在sqooping时,所有数据都将转到一个区域,因此当我在hive上查询时,只执行一个map taks来获取记录。是否有任何方法可以处理此问题以提
高性能
。
浏览 1
提问于2013-10-23
得票数 0
2
回答
Hbase
Phoenix批插入非常慢
hbase
、
phoenix
我做了一个小测试,比较了Phoenix batch insert和使用
hbase
的多个puts。而且菲尼克斯的速度比直击要慢得多(6.157秒对10,000条记录的0.083秒)。
浏览 4
提问于2015-03-13
得票数 1
1
回答
Hadoop、
HBase
和Hive中的性能问题
hadoop
、
hive
、
hbase
、
hdfs
我正在将数据从SQL迁移到Hadoop,其中我也使用了
HBase
& Hadoop。我已经成功地将数据从SQL导入到Hadoop、
HBase
和Hive。但问题在于系统的性能。在SQL中,我在5-10分钟内得到了数百万条条目的结果,但是从
HBase
& Hive获取1000万个数据需要花费大约1小时的时间。有人能帮我提高Hadoop系统的性能吗?
浏览 5
提问于2015-11-20
得票数 0
回答已采纳
1
回答
mapreduce能否在共享元组空间(例如:数据库)上高效工作?
mapreduce
我之所以问这个问题,是因为我想知道在数据库或共享键值存储上运行mapreduce查询是否有效?
浏览 0
提问于2010-03-09
得票数 2
回答已采纳
2
回答
HBase
项目-技术和架构
java
、
spring
、
open-source
、
projects-and-solutions
、
hbase
我想开发一个应用程序来学习如何使用
HBase
。我可以使用什么技术来使用
HBase
开发一个好的学习项目?例如,我想使用Ruby on Rails或Java或Spring之类的东西。我能做什么架构?
浏览 0
提问于2012-02-25
得票数 1
回答已采纳
2
回答
HBase
存储文件存储位置
hadoop
、
hdfs
、
hbase
HBase
中的每个区域服务器都被分配到某些表的某些区域。这些区域服务器可能有许多区域,它们相应的Store文件在其他HDFS上有副本。
浏览 13
提问于2022-01-25
得票数 1
1
回答
HBase
- WAL和MemStore有什么区别?
hadoop
、
architecture
、
hbase
、
hdfs
我正在尝试理解
HBase
体系结构。我可以看到两个不同的术语被用于相同的目的。 Write Ahead Logs和Memstore都用于存储尚未持久化到permanent storage的新数据。
浏览 2
提问于2016-10-16
得票数 11
回答已采纳
2
回答
将数据仓库星型模式映射到
HBASE
hbase
、
data-warehouse
、
star-schema
、
dimensional-modeling
、
aggregates
然后,将事实表导入Hadoop上的
HBASE
。您将得到一个庞大的
HBASE
表,即没有维度表的键值存储。我会这样做,因为联接在
HBASE
中是成本抑制性的(因此对于维度联接没有实际意义,只需在维度列上强制执行维度值)。 有谁对解决方案3有什么建议吗?
HBASE
解决方案在快速读取的范围内是最优的吗? 就写作而言,我不喜欢快速写入,因为它们将以批处理的形式在几个小时内完成。有什么想法,建议和经验,把一个巨大的事实表多维度(一个传统的DW星型模式)到
HBASE
巨型无量纲表?我的想法是
浏览 5
提问于2012-09-26
得票数 4
1
回答
hbase
跳过区域服务器直接从hfile读取行
hadoop
、
apache-spark
、
hbase
、
cloudera
我试图将100多亿条记录倒入
hbase
,平均每天增长1000万条,然后尝试对记录进行完整的表格扫描。我知道对hdfs的全面扫描将比
hbase
更快。目前正在使用
Hbase
对hdfs上的不同数据进行排序。该应用程序正在使用spark构建。 当从
hbase
读到火花时,区域似乎决定了火花的
浏览 3
提问于2017-03-22
得票数 2
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
【HBase笔记】从洗袜子到hbase
【HBase大爆炸】HBase之常用Shell命令
Spark On HBase
走进Hbase
HBase原理
热门
标签
更多标签
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
活动推荐
运营活动
广告
关闭
领券