腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
在全
分布式
模式下配置
hadoop
/hbase
、
、
、
我是Hbase的新手,我需要在
完全
分布式
模式下做一些实验,我正在使用ubuntu。我希望用两个节点(一个主节点和一个从节点)创建一个集群,根据我所读到的,HBase运行在一个
Hadoop
分布式
文件系统下,我需要这两个系统都进行适当的配置。我试着在互联网上学习一些教程,但是我无法在
分布式
模式下正确地运行Hbase。我认为问题在于
hadoop
和hbase配置。你能告诉我应该遵循的所有步骤吗?正确设置
h
浏览 3
提问于2015-07-02
得票数 0
5
回答
如何在单机上最佳运行
Hadoop
?
、
、
、
、
我想使用
Hadoop
来完成一项涉及大量数据(超过100万字,超过1B字组合)的任务。将伪
分布式
模式或
完全
分布式
模式作为在一台计算机上充分利用
Hadoop
功能的最佳方法??。对于我打算使用
Hadoop
来说,经历数据丢失和由于节点失败而不得不重新运行作业并不是什么大问题。 涉及到的使用
完全
分布式
模式。描述伪
分布式
模式;更详细的信息可以找到。
浏览 7
提问于2015-07-30
得票数 11
1
回答
如何在独立
hadoop
设置(伪
分布式
)上启动多个datanode进程
我是刚认识
Hadoop
的。我已经在运行Ubuntu13.03的单个VM上配置了独立
hadoop
设置。使用start-all.sh启动
hadoop
进程后,jps命令显示1053 JobTracker1365 Jps根据我的理解,
Hadoop
从1个namenode和1个datanode开始。
浏览 5
提问于2014-10-02
得票数 2
1
回答
Hadoop
集群的动态IP
我需要建立一个多节点
Hadoop
集群。到目前为止,我已经为每个集群节点使用静态IP地址完成了安装。但是,在我最近的集群中,我需要使用DHCP分配的节点。
浏览 7
提问于2016-01-23
得票数 0
1
回答
Hadoop
纱HBase安装
、
、
我已经在操作系统上运行
Hadoop
纱线了。我应该停止现有的
Hadoop
过程,
完全
依赖于HBase,还是使用现有的纱线设置配置HBase?如果需要的话我可以分享更多的信息。我试图先在伪
分布式
上运行HBase,然后在
分布式
模式下运行. 要明确的是-我是问我是否需要在安装HBase之前运行
Hadoop
纱线(以
分布式
方式,而不是在一台计算机上)。如果没有,而且我仍然在这些计算机上使用
Hadoop
,会不会导致HBase在这些服务器上运行任何问题。
浏览 2
提问于2014-09-23
得票数 1
回答已采纳
1
回答
Hive是以什么模式安装的?
例如,
Hadoop
安装有3种模式:独立模式、伪
分布式
模式和
完全
分布式
模式。类似地,Hive有任何特定类型的分布吗?可以在
分布式
模式下安装Hive吗?
浏览 0
提问于2013-05-30
得票数 2
1
回答
使用Docker运行
Hadoop
(用于DEV和PROD环境)
、
使用Docker运行
Hadoop
的最简单方法(对dev‘和真实环境都适用)是什么? 也就是说,对于本地开发环境和实际环境的差异,应该仅仅是目的机。
浏览 4
提问于2016-09-29
得票数 4
1
回答
为什么
hadoop
对于一个简单的hello world作业很慢?
我正在遵循
hadoop
网站上的教程:https://
hadoop
.apache.org/docs/r3.1.2/
hadoop
-project-dist/
hadoop
-common/SingleCluster.html我在伪
分布式
模式下运行以下示例。time
hadoop
jar
hadoop
/share/
hadoop
/mapreduce/<em
浏览 23
提问于2019-03-02
得票数 2
回答已采纳
3
回答
配置
Hadoop
、HBase和Hive集群
、
、
、
我是
Hadoop
,HBase和Hive的新手。我在伪
分布式
模式下安装了
Hadoop
、HBase和Hive,一切都很好。现在,我计划使用Hive、HBase和ZooKeeper建立一个简单的
Hadoop
集群(5个节点)。我以前读过一些文件和说明,但我找不到一个很好的解释我的问题。我不确定,在哪里运行所有守护进程。另一个问题是关于Hive:我知道Hive是
Hadoop
客户端。我还应该在主节点上安装Hive吗?说得通吗?注意:我只有5台机器来模拟一个集群。
浏览 13
提问于2012-11-12
得票数 4
3
回答
Hadoop
是什么?怎么使用呢?
、
听说
Hadoop
是做大数据并行计算的框架,这种跟“云计算“有什么区别?
浏览 719
提问于2017-09-28
1
回答
以
分布式
模式部署
Hadoop
程序
目前,我正在使用Eclipse开发我的
Hadoop
演示。我已经在
Hadoop
单机模式下运行并测试了它。但是现在我想把我的
Hadoop
演示编译成Jar文件,以便像Wordcount example一样以
完全
分布式
的模式部署它。 有谁能指导我怎么做吗?
浏览 1
提问于2015-07-17
得票数 0
1
回答
Nutch在本地模式下是否独立于
Hadoop
?
、
、
、
我知道在部署模式下运行Nutch是基于
Hadoop
的
分布式
爬行,但是当我们在本地模式下运行它时,我不能
完全
理解。在这种情况下,Nutch是否独立于
Hadoop
?
浏览 0
提问于2017-03-14
得票数 0
1
回答
如何从系统中
完全
卸载所有版本的
hadoop
?
、
、
我已经在ubuntu14.04LTS(单节点)中使用本教程的在伪
分布式
模式下安装了CDH5和Mvr1sudo apt-get install
hadoop
-0.20-conf-pseudo在pseduo
分布式
模式下安装软件包。我使用的是命令卸载Mvr1sudo apt-get install
hadoop
-conf-pseudo
浏览 5
提问于2015-11-07
得票数 0
1
回答
如何获取nutch中爬行任务的作业状态
在爬行周期中,我们有许多任务/阶段,如注入、生成、获取、解析、更新、反向链接、去达率和索引作业。现在,我想知道,除了引用文件之外,还有什么方法可以获得爬行任务的状态(它是运行的还是失败的)?更准确地说,我想知道是否可以跟踪生成/提取/解析阶段的状态?任何帮助都将不胜感激。
浏览 2
提问于2016-09-28
得票数 2
回答已采纳
2
回答
hadoop
伪
分布式
运行与单机运行的性能比较
、
、
我是
hadoop
的初学者。但我有一个有趣的观察。通过在独立操作和伪
分布式
操作中运行相同的示例,独立操作耗时不到1分钟,但伪
分布式
操作耗时超过3分钟。这是一个很大的区别。我可以理解在
分布式
模式下有额外的网络和调度开销。但差别似乎太大了。这可能不是真正的比较,因为示例非常简单。 我的问题是,在实际作业中,单机模式和
分布式
模式有多大的不同?
浏览 1
提问于2012-05-02
得票数 0
1
回答
Mahout推荐引擎:走向
分布式
、
、
有谁知道我如何转换书中关于推荐引擎的代码,使其与Ηadoop
完全
分布式
环境保持一致?我的主要困难是转换我的代码(当前从本地磁盘读取和写入),以便它在伪
分布式
环境(如Cloudera)中运行。
浏览 2
提问于2013-02-11
得票数 1
1
回答
Amazon :在本地文件系统上运行的配置
、
、
然后
Hadoop
将在本地文件系统上运行,而不是HDFS。在创建作业流时,我通过添加引导操作来更改此值。 .subnet-id> --instance-type c3.2xlarge --bootstrap-action s3:/
浏览 1
提问于2014-06-24
得票数 0
2
回答
Hadoop
大数据平台如何搭建呢?需要注意什么呢?
、
、
Hadoop
平台如何进行搭建并使用?
浏览 384
提问于2019-04-03
1
回答
Hadoop
全分布模式
、
、
、
我是
Hadoop
的新手。我已经成功地开发了一个简单的Map/Reduce应用程序,它在“伪
分布式
模式”中工作得很好,我想在“
完全
分布式
模式”中测试它。
浏览 2
提问于2011-06-03
得票数 0
1
回答
Hadoop
1.2.1-使用
分布式
缓存
、
、
我开发了一个使用
分布式
缓存的
Hadoop
应用程序。我用
Hadoop
2.9.0。在独立和伪
分布式
模式下,一切都很好。jar MyApp.jar -files cache.txt /input /output 现在,我需要测量实际
Hadoop
集群上的执行时间。不幸的是,我使用
Hadoop
1.2.1版本的
Hadoop
集群。因此,我创建了新的Eclipse项目,引用了适当的
Hadoop
1.2.1 jar文件,在独立模式下,每件事情都正常工作
浏览 3
提问于2018-04-19
得票数 0
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
Hadoop完全分布式搭建
实验 1/13-Hadoop完全分布式
hadoop系统配置完全分布式3
Hadoop配置完全分布式介绍以及配置步骤
hadoop系统配置完全分布式1
热门
标签
更多标签
云服务器
ICP备案
实时音视频
云直播
对象存储
活动推荐
运营活动
广告
关闭
领券