腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
2
回答
Hadoop
Hbase
工作流
、
许多应用程序似乎都是面向批处理的(例如
日志
文件数据),但我不确定
hbase
如何适应这里? 将
日志
文件数据存储在
hbase
中,然后对其进行处理并将其输出到其他存储格式是否很常见?将原始
日志
文件传递到hadoop,然后将输出存储在
hbase
中是不是更常见?我想我真正的问题是
hbase
通常用作hadoop的输入或输出,还是两者兼而有之?
浏览 0
提问于2012-04-06
得票数 2
回答已采纳
2
回答
如果已经使用Hadoop,那么
HBase
还是Mongo用于
分析
DB?
、
、
、
我现在有一个Hadoop集群,在这里我存储了大量的
日志
,我在其中运行用于计算聚合
分析
的猪脚本。我还拥有一个Mongo集群,在这里存储生产数据。我最近被安置在一个职位上,我需要做很多一次性的
分析
查询,或者让其他人也能做。这些查询经常需要同时使用生产数据和
日志
数据,因此无论我使用什么,我都希望将所有内容放在一个地方。以下是我所看到的Mongo和
HBase
的优缺点: 由于
日志
数据是用JSON编写的,所以我可以很容易地将它输
浏览 4
提问于2013-05-15
得票数 2
1
回答
Hadoop中
日志
文件的含义
、
本文试图
分析
不同应用(如MapReduce、
Hbase
等)的Hadoop系统的工作特点,有不同用途的
日志
文件,如namenode、datanode和jobtrack。
日志
文件的格式是一定的。是否有人知道
日志
文件中每个项目的确切含义?或者在哪里能找到相关的文档? 谢谢!
浏览 4
提问于2014-05-20
得票数 0
1
回答
在线
分析
处理中的“在线”意味着什么?
、
、
分析
什么时候发生?在许多应用程序中生成
日志
,-> kafka -> (关系DB) -> flink作为ETL ->
HBase
,而
分析
将在数据插入
HBase
之后发生。如果不是,
分析
什么时候发生?如果这个设计通常不在这个行业,请纠正我。 假设应用程序在一天内生成的
日志
具有PB级别的
浏览 5
提问于2021-09-13
得票数 1
回答已采纳
2
回答
从mysql到
Hbase
的连续数据迁移
、
、
、
我已经安装了hadoop和
hbase
用于实时
分析
目的。我面临的问题是从mysql到
Hbase
的在线数据迁移。sqoop工具对于批量数据迁移很有用,有没有办法将mysql中的数据在线传输到
HBase
(当插入/更新/删除发生时)。这样就可以实现实时
分析
。不是接近实时的。 请在这个问候方面帮助我。
浏览 2
提问于2012-03-29
得票数 1
回答已采纳
1
回答
什么是Hive通用用例?
、
、
假设我的公司希望保留一些web服务器
日志
文件,并且能够始终搜索和
分析
日志
。因此,我创建了一个表列,其对应于
日志
文件中的列。然后将
日志
文件加载到表中。现在,我可以开始查询数据。因此,随着数据在未来的日期到来,我只是不断地将数据添加到这个表中,因此我总是将
日志
文件作为一个表格在Hive中进行搜索和
分析
。 上面的场景是一种常见的用途吗?如果是,那么如何继续向表中添加新的
日志
文件?我每天都要手动地把它们加到桌子上吗?
浏览 2
提问于2017-10-15
得票数 2
2
回答
Hbase
模式设计
、
、
、
我必须设计一个
Hbase
表来存储用户信息,这些信息是针对社交网络的,比如:年龄、性别、教育程度、爱好、读书、旅行的国家.注:我们可以在未来增加更多的信息,我们现在不知道所有的信息。您对
HBASE
表模式(行键、列族.)有什么建议?这优化了这类搜索查询(考虑到我们将来将添加更多信息),编写此类查询的最佳方法是什么(扫描、获取、MapReduce )。 谢谢
浏览 2
提问于2013-04-14
得票数 0
回答已采纳
1
回答
Hbase
与Cassandra或任何其他用于系统监控应用的大数据平台
、
、
、
、
我的主要选择是
HBase
和Cassandra。请同时说明此类系统的设计规范和数据模式
浏览 0
提问于2014-01-15
得票数 0
1
回答
一个用于统计计数的数据库系统
、
、
、
、
我的服务器生成大量的事务
日志
。每个记录都包含有关参考URL、用户、制造商和相关产品的信息。您推荐以灵活的方式聚合
日志
的数据库系统吗?MySQL:存储友好且易于存档,但每次聚合时都需要修改表和重写查询但是它看起来并不像MySQL和CouchDB那么容易存储,也不像那样稳定。
浏览 2
提问于2012-02-06
得票数 0
回答已采纳
1
回答
用于实时
分析
解决方案的
HBase
模式/密钥
、
、
、
、
我们正在考虑使用
HBase
进行实时
分析
.我的问题是:如何最好地设计
HBase
数据库的模式和主键设计,以支持快速但灵活的查询。假设我们将以下行存储在数据库中:并且假设我
浏览 2
提问于2012-05-29
得票数 5
回答已采纳
2
回答
null : org.apache.hadoop.
hbase
.MasterNotRunningException: NativeException
、
我已经成功地启动了Hadoop和
Hbase
。但是当我尝试这个操作时,./
hbase
shell
HBase
Shell;在支持的命令列表中输入'help‘。Version: 0.20.3,r902334,Mon Jan 25 13:13:08 PST 2010
hbase
(main):001:0> create 'userstable',{NAME =>
浏览 1
提问于2011-04-19
得票数 0
回答已采纳
1
回答
存储和
分析
来自不同应用程序的
日志
数据
、
、
、
我们有不同的应用程序来密集地生成
日志
,我们对这些
日志
进行了大量的
分析
、可视化和监视。目前,我们正在使用azure应用洞察力来进行可视化,但这还不足以满足我们所需要的高级可视化的需要,因此我们决定将数据转移到另一个适合
分析
数据的数据库中,并能够与tableau连接。我们正在探索elasticsearch,但是没有直接连接到tableau,所以我们需要构建我们的连接器,而且我还找到了一些更多的选项,比如ClickHouse、PrestoDB、InfluxDB、Apache
HBase
因此,我的问题是,什么是<
浏览 0
提问于2020-02-16
得票数 1
1
回答
Java客户端检查表存在
日志
信息
、
我编写了一个Java程序将数据插入到
HBase
中。如果我只是简单地用table.put(put);{ table.put(put);
HBase
INFO zookeeper.ClientCnxn:
浏览 0
提问于2014-03-04
得票数 1
回答已采纳
2
回答
git
日志
中准确词组的标注
、
、
、
、
我使用git log command来获取提交
日志
。但是,当我只需要找到包含特定单词的提交
日志
时,也会显示一些意想不到的
日志
。
HBASE
-7921.region online on any RS to get rid of double assignments
HBAS
浏览 0
提问于2018-04-05
得票数 0
回答已采纳
1
回答
自动
日志
分析
和报警生成
、
、
、
我有许多组件在不同的服务器上生成
日志
。Apache看起来是向中央
日志
服务器流的明智选择,最有可能进入elasticsearch实例进行查询和
分析
。下面是我的问题:我想提供一个脚本引擎,侦听到达中央服务器的
日志
事件流。作为Flume中的拦截器,或者作为elasticsearch的插件,或者其他什么东西,这样做有意义吗?
浏览 2
提问于2013-08-26
得票数 3
回答已采纳
2
回答
使用flume将数据从mySQL复制到
Hbase
:如何?
、
、
、
我有一个负载很重的大型mySQL数据库,希望将该数据库中的数据复制到
Hbase
,以便对其进行
分析
工作。编辑__:我希望数据能够相对较快地复制,并且没有任何模式更改(没有时间戳行,等等) 我读过这样的文章,可以使用flume,以mySQL作为源,可能是mySQL bin
日志
,
Hbase
作为接收器,但没有找到任何细节
浏览 4
提问于2013-07-09
得票数 2
1
回答
如何连续地将mongodb数据写入正在运行的hdinsight集群中
、
、
、
我希望让windows azure hdinsight集群始终运行,这样我就可以定期从我的主数据存储区(即mongodb)写入更新,并让它处理地图--按需减少作业。在hdinsight上有可能吗?有可能用hadoop吗?谢谢,
浏览 2
提问于2013-12-18
得票数 1
1
回答
Hadoop-Hive-
HBase
网络
分析
建议
、
、
、
、
最近,我们对Map非常好奇,特别是Hadoop和各种支持组件(
HBase
、HDFS、Pig、Hive等等)。为了了解更多关于它,我们想写一个网络
分析
服务。它将使用Javascript页面标记来收集度量,Hadoop和一些东西可以通过web接口提供
分析
和报告。 架构的非Hadoop方面很容易。我们非常希望使用我们的
分析
工具的web界面来获得相对快速的度量。潜伏期不是我们的朋友。那么,实现这一目标的最佳方式是什么?Hive能直接从
HBase
获取数据吗?我们应该把它存储在HDFS的某个地方,然后在Hive中阅读
浏览 0
提问于2012-02-06
得票数 2
回答已采纳
1
回答
HBase
中的
日志
文件
、
、
HLog文件将在哪里存储在
HBase
中。目前,我在本地文件系统上使用
HBase
,而不是HDFS,我想观察
HBase
如何记录每个操作的细节,比如put。我怎么能观察到呢?
浏览 1
提问于2013-03-15
得票数 3
2
回答
独立模式的zookeeper.znode.parent值
、
、
我在独立模式下运行
HBase
,并得到以下错误。2016-10-05 16:29:06,268 ERROR [main] client.ConnectionManager$HConnectionImplementation: The node /
hbase
对于
HBase
-site.xml文件中的
HBase
,独立模式的zookeeper.znode.parent的值应该是什么?
浏览 26
提问于2016-10-05
得票数 0
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
《NoSQL主题分析报告-HBase》
hbase运维故障案例分析
Web 访问日志分析
重做日志中如何分析日志容量及切换频率?
重温大数据-Hbase部署以及架构分析
热门
标签
更多标签
云服务器
ICP备案
腾讯会议
云直播
对象存储
活动推荐
运营活动
广告
关闭
领券