腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
用于移动设备的
Hadoop
、
我正在做一个项目,我需要在移动设备上运行
Hadoop
。我搜索过"Mobile“,但没有找到运行在移动设备上的
Hadoop
的任何发行版。是否有运行在Mobile上的
Hadoop
发行版,如果没有,我如何编写我自己的
Hadoop
来完成它。
浏览 3
提问于2014-01-12
得票数 1
1
回答
与单独安装HBase和
Hadoop
相比,同时安装HBase和
Hadoop
有什么利弊?
、
、
、
我的
意思
是,有两个选择: 1.在
Hadoop
集群
上安装HBase,这也是离线计算,所以只有1个
hadoop
集群
。2.安装一个用于离线计算的
Hadoop
集群
,然后再安装一个仅供HBase使用其HDFS的
Hadoop
集群
。这两个选项的优缺点
是什么
?
浏览 2
提问于2013-07-11
得票数 1
1
回答
Ganglia dfs.namenode.fileinfoops中的
Hadoop
指标。这意味着什么?
、
我正在运行一个3Node
Hadoop
集群
,并使用Ganglia对其进行监控,我能够在Ganglia web门户中看到所有
hadoop
指标。我不能理解dfs.namenode.fileinfoops度量
是什么
意思
?
浏览 0
提问于2013-03-26
得票数 0
1
回答
ubuntu for
hadoop
上的新用户设置?
、
、
、
我正在尝试在我的ubuntu上安装
hadoop
,并按照页面上的安装指南进行安装,但在第一步就一直感到困惑: password: New passwd: 我知道这是我创建了一个新用户-
hadoop
。cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys $ ch
浏览 1
提问于2018-04-08
得票数 0
2
回答
Kerberos中的服务票证-
Hadoop
安全性
、
、
、
、
我试图使用kerberos来保护
hadoop
集群
的安全。我能够使用kinit命令生成TGT。但除此之外,我被塞了起来。
Hadoop
-Kerberos故事 在第四步,“索取服务票”,这到底
是什么</em
浏览 5
提问于2014-12-02
得票数 1
回答已采纳
4
回答
Map Reduce插槽定义
、
、
、
、
我正在成为cloudera
Hadoop
管理员的路上。从我开始,我听说了很多关于在
Hadoop
集群
中计算每台机器的插槽,比如定义Map插槽和Reduce插槽的数量。请解释一下,当涉及到
集群
的Machine中的一个计算插槽时,它到底
是什么
意思
。
浏览 1
提问于2014-08-16
得票数 5
2
回答
Hadoop
中的索引过程
有谁能解释一下
Hadoop
中的索引过程
是什么
意思
?我们在RDBMS中所做的类似于传统的数据索引,所以在
Hadoop
中做同样的类比,我们对数据块进行索引,并将数据块的物理地址存储在某种数据结构中。因此,它将是
集群
中的一个额外空间。提前感谢
浏览 3
提问于2016-03-03
得票数 3
1
回答
在Talend中创建
Hadoop
群集连接而不打开IDE
、
我正在尝试创建一个“一键解决方案”,在云中使用
Hadoop
集群
、Ambari Server和Talend (通过Apache布鲁克林)。问题是,有没有办法不打开塔伦德。我的
意思
是,手动创建所需的文件,并将它们放在相应的文件夹中。 如果是的话,我需要创建哪些文件,以及这些文件的内容
是什么
?
浏览 1
提问于2015-09-21
得票数 1
回答已采纳
3
回答
适用于亚马逊网络服务上MapReduce的
Hadoop
或
Hadoop
流
、
、
、
我知道用Java语言写这个项目会让我有更多的功能可用,但是C++也可以通过
Hadoop
Streaming来完成它。提前感谢
浏览 1
提问于2009-12-29
得票数 5
回答已采纳
1
回答
在Mahout中进行聚类后,文件最终质心存储在其中
、
、
我使用KMeansDriver.run函数,就像我使用
Hadoop
一样。 我想知道final centroids存储在哪个文件中。这是否与我们为初始
集群
提供的文件相同。另外,我想问一下生成的part-m和part-r文件
是什么
意思
?
浏览 2
提问于2014-02-21
得票数 0
2
回答
我在哪里可以找到EC2上的AMI for
Hadoop
?
、
、
、
、
我正在尝试在亚马逊EC2上永久设置
Hadoop
。目前我正在做的是每天早上启动EC2实例并设置
Hadoop
。有什么方法可以避免这个繁琐的步骤吗?我正在寻找一个
Hadoop
镜像,可以加载到EC2上,让事情变得容易。最终,我的目标是运行像和这样的生物信息学应用。为了让这些
浏览 3
提问于2013-10-09
得票数 0
1
回答
HBase PeriodicMemstoreFlusher异常
、
我运行HBase
集群
,每隔10秒在日志文件中看到此异常: at org.apache.
hadoop
.hbase.regionserver.HRegion.shouldFlush(HRegion.java:1904) at org.apache.
hadoop
.hbase.regionserver.HRegionS
浏览 0
提问于2016-01-21
得票数 3
1
回答
在分布式模式(
hadoop
cluster 1.x版本)上配置Hbase,zookeeper是强制的吗?
、
我只有2个节点
集群
(分布式的)有
hadoop
1.2.0。我想在上面配置hbase(0.94.10)。是否必须为此配置配置zookeeper --用于分布式模式?我听说,即使在分布式模式下,
Hadoop
1.x版本也不强制使用Zk来配置hbase。是真的吗?
浏览 1
提问于2014-02-07
得票数 0
1
回答
hadoop
客户端能利用rack意识的好处吗?
、
我有一个由50个节点组成的
Hadoop
集群
,并使用Spark流运行管道。
Hadoop
集群
使用10台机器生成的数据生成报表。我可以利用这10台机器的机架感知功能而不将它们作为
Hadoop
集群
的一部分添加吗?当我说到机架感知时,我的
意思
是,如果这些机器与
Hadoop
数据节点位于同一个机架上,那么在使用齿条感知时,我希望每台摄取机器将数据上传到它最近的datanode,而不是随机的方式,这样我就可以减少网络流量
浏览 2
提问于2020-08-25
得票数 0
回答已采纳
3
回答
hadoop
集群
中的边缘节点
、
有人能给我解释一下
hadoop
中Edge节点的架构吗?我只能在互联网上找到定义,我有以下问题- 1)边缘节点必须是
集群
的一部分吗(如果它在
集群
内,我们有什么优势?)它是否在hdfs中存储任何数据块。2)边缘节点可以在
集群
外吗?
浏览 5
提问于2013-05-22
得票数 12
1
回答
如何使用spark和ElasticSearch从/写入不同的elasticsearch
集群
?
、
、
、
、
我很高兴地使用了spark和elasticsearch (与elasticsearch-
hadoop
驱动程序)和几个巨大的
集群
。有时,我希望将整个数据
集群
提取出来,处理每个文档,并将它们放到不同的Elasticsearch (ES)
集群
中(是的,数据迁移也是这样)。目前,无法将ES数据从
集群
中读取到RDD中,并使用spark + elasticsearch-
hadoop
将RDD写入另一个RDD中,因为这将涉及从RDD中交换SparkContext。然而,这里出现了一个问题:然后我需要一个
浏览 9
提问于2015-03-12
得票数 6
回答已采纳
2
回答
将50 to数据从本地
Hadoop
集群
迁移到Google云存储
、
、
我正在尝试将
Hadoop
集群
中的现有数据(JSON)迁移到。 从本地
Hadoop
集群
向GCS移动数据的推荐方法
是什么
?在GSUtil的情况下,它可以直接将数据从本地
Hadoop
集群
转移到GCS,还是首先需要在运行GSU
浏览 8
提问于2014-08-13
得票数 6
回答已采纳
1
回答
无法为您的平台加载本机
hadoop
库(Ubuntu12.04)错误?
、
、
、
我在我的Ubuntu单节点
集群
上使用
Hadoop
2.2。我已经使用start-all.sh启动了
hadoop
集群
。当我试图在HDFS中加载一个文本文件时,它会抛出以下错误。hduser@ubuntu:~$
hadoop
dfs -put /home/aditya/Desktop/data.txt 13/
浏览 6
提问于2013-11-25
得票数 0
回答已采纳
1
回答
是否在HDFS
集群
上重新分配数据?
、
、
我正在阅读
Hadoop
和Spark文档,以了解spark如何在
Hadoop
集群
上工作。根据
Hadoop
文档,
Hadoop
集群
是一组具有计算和数据存储能力的通用硬件,它们还假定“移动计算比移动数据便宜”。 现在,当我处理一个大文件,它是存储在HDFS上使用火花。Spark是否会随机地将文件中的数据重新分发到
Hadoop
集群
,或者它知道存储数据分区的节点将要求各自的节点处理其数据?我提出了这个问题,因为没有提到火花如何处理
Hadoop
<e
浏览 11
提问于2022-09-13
得票数 1
回答已采纳
1
回答
执行jps命令时的额外内容
、
我在100 on的文本文件上运行了一个单词计数程序,我在多节点
集群
中使用了3个系统,slave1和从2。除了主2从服务器之外,还分别运行数据节点和任务跟踪器。现在,当我在从机上运行jps推荐时,它将减慢以下输出:2970 DataNode14534RunJar3215 TaskTracker6463 Child 孩子,这
是什么
?你说RunJar<em
浏览 4
提问于2014-04-12
得票数 1
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
Hadoop集群配置
Hadoop集群PoC方案
Hadoop2.7.0 集群安装部署
Hadoop集群搭建和简单应用
手把手搭建Hadoop集群
热门
标签
更多标签
云服务器
ICP备案
腾讯会议
云直播
对象存储
活动推荐
运营活动
广告
关闭
领券