腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
2
回答
在使用bdutil创建的gcloud实例成功执行ssh之后,几乎所有内容的“权限被拒绝”。
、
、
、
刚刚创建了实例并使用bdutil部署了
集群
。SSH
可以
很好地工作,因为我
可以
在实例中使用./bdutil shell。当我试图访问诸如
Hadoop
、hdfs等目录时,它会引发一个错误: 终端看起来像username@
hadoop
-m $,我知道
hadoop
-m是实例的名称。
用户名
是什么?
浏览 5
提问于2015-07-02
得票数 1
1
回答
使用AWS
Hadoop
集群
设置提交Spark作业
、
、
、
我在AWS EC2中有一个
hadoop
集群
设置,但我的开发设置(Spark)是在本地windows系统中。当我尝试连接AWS Hive thrift服务器时,我
可以
连接,但当我尝试从本地spark配置提交作业时,它显示一些连接被拒绝错误。请注意,在windows中,我的
用户名
与
Hadoop
eco系统在AWS服务器中运行的
用户名
不同
。谁能给我解释一下底层系统在这个设置中是如何工作的?2)在我的配置中,我是否需要使用与AWS中
hadoop
集群</
浏览 1
提问于2017-08-28
得票数 0
2
回答
以其他用户身份运行pig作业
、
这是一种情况,我有一个
hadoop
集群
,它没有配置Kerberos安全性和工作站。
Hadoop
集群
运行Cloudera CDH3发行版。群集上的数据都存储在'hdfs‘用户下。群集和工作站上的用户帐户
不同
,
hadoop
群集中的所有数据都存储在'hdfs‘主目录下工作站具有完整的用户帐户集。是否
可以
告诉PIG在
不同
的用户帐户下执行作业。我知道当没有为
集群
配置安全性时,
用户名
只是与作业配置.XML一起
浏览 0
提问于2012-11-02
得票数 0
回答已采纳
3
回答
需要在
Hadoop
-2.0.0中手动创建dfs.domain.socket.path才能使用Impala
吗
?
、
、
、
我正在按照说明配置
hadoop
-2.0.0
集群
以安装Impala。但是,当我通过start-dfs.sh启动
Hadoop
集群
时,它无法启动数据节点。datanode中的日志显示“无法统计路径组件:'/var/lib/
hadoop
-hdfs'”。然后,我手动创建/var/lib/
Hadoop
-hdfs,并再次启动
Hadoop
集群
。它再次失败,日志显示这是关于该目录的权限问
浏览 14
提问于2014-09-24
得票数 1
5
回答
当从远程机器将文件放到HDFS上时,如何指定
用户名
?
、
、
、
我有一个
Hadoop
集群
设置,并使用一个通用的默认
用户名
"user1“。我想从一台不属于
hadoop
集群
的远程机器将文件放入
hadoop
。我在远程机器上配置
hadoop
文件时,从远程机器调用时,它会将file1放在
Hadoop
集群
上。实际上,上面的代码只能在远程机器上执行,如下所示:
hadoop
dfs -put file1
浏览 3
提问于2012-07-07
得票数 33
回答已采纳
1
回答
多节点
hadoop
集群
和在mesos上运行
hadoop
有什么区别?
、
我已经构建了一个多节点
hadoop
集群
,然后我开始研究mesos和在mesos
集群
上运行
hadoop
的能力,所以我的问题是: 1) Should I run
hadoop
on mesos cluster
浏览 0
提问于2015-09-12
得票数 0
1
回答
在C#中连接
hadoop
、
、
、
我想在c#中使用HDInsight连接
hadoop
。我在AZURE中创建了一个
集群
,并成功地创建了它。我还在里面启用了远程桌面连接。当我在C#中输入凭据并执行作业时,就会得到连接错误。var
hadoop
=
Hadoop
.Connect(new Uri("https://clustername.azurehdinsight.net"), "admin", ""); //I have/CodeFiles"
浏览 4
提问于2014-05-05
得票数 1
2
回答
对于linux shell
用户名
和组映射,
Hadoop
从哪里获得
用户名
和组映射?
、
、
目前,我正在进行一个增强
Hadoop
集群
安全性的项目。最后,我将使用Kerberos和Sentry进行身份验证和授权。
用户名
和组映射将来自AD/LDAP (?),我认为是这样的。我有个问题,我还没想出来据我所知,
Hadoop
没有
用户名
和组名,
用户名
和组名来自客户端,无论是来自本地客户端还是Kerberos领域。但是它对我来说有点模糊,我
可以
在这里获得实现的详细信息
吗
? 此信息是来自H
浏览 2
提问于2016-10-14
得票数 1
1
回答
星星之火:如何从
不同
的用户以“yarn_client”模式远程启动木星
、
、
、
、
假设我有一个4节点
Hadoop
集群
(在我的例子中是Cloudera分发版),每个节点('/home/
hadoop
')上都有一个名为'
hadoop
‘的用户。此外,我还安装了第五台服务器,上面安装了木星和Anaconda,
用户名
为“ipython”,但没有
hadoop
安装。为了获取信息,我将一个虚拟目录(用于设置
HADOOP
_CONF_DIR环境变量)从
Hadoop
集群
复制到第五个服务器。
浏览 1
提问于2015-10-22
得票数 1
1
回答
与HDInsight连接的蜂窝ODBC
、
、
、
、
我正在Azure中设置一个VM服务器,我希望它能够连接到HDInsight
集群
上的Hive。我正在尝试设置ODBC DSN,我不确定各种设置是什么,以及如何在Azure门户中找到它们: 干杯克里斯。
浏览 3
提问于2013-12-07
得票数 0
回答已采纳
1
回答
无法写入
Hadoop
目录模式775组权限UserGroupInformation
、
、
我在一个启用文件系统权限的私有
集群
上运行
Hadoop
2.6.2。
集群
有密码文件,只有像
hadoop
这样的系统用户,没有个人帐户。问题是,我不能写入DFS目录('shared'),即模式775和组
hadoop
;edge节点向我显示
hadoop
组的一个成员。我以为会使用边缘节点上的用户组成员身份,但不是
吗
?@edge$ hdfs dfs -ls /user/
hadoop
drwxr-xr-
浏览 5
提问于2015-12-22
得票数 2
回答已采纳
2
回答
基于Ubuntu和Windows从服务器的
Hadoop
集群
配置
7从服务器安装
集群
(这主要是为了学习和设置开发环境) (This ) 在
集群
浏览 3
提问于2014-01-23
得票数 2
1
回答
Did hortan沙箱可用作单节点
Hadoop
群集
、
、
、
我喜欢学习
Hadoop
多节点的设置和安装,通过参考上面的教程,我了解到单节点
集群
环境
可以
用作多节点
集群
的节点 目前我正在学习使用Horton沙箱的
Hadoop
,我们
可以
使用沙箱系统作为单节点环境
吗
?若否,沙箱与传统
Hadoop
群集安装有何
不同
浏览 0
提问于2014-11-10
得票数 0
1
回答
如何查找
Hadoop
执行作业的帐号名称
、
、
我正在尝试连接到我的azure
集群
,并使用Visual Studio 2010中的
hadoop
。我遵循以下说明: ..at Microsoft.
Hadoop
.MapReduce.HadoopImplementations.HadoopOnAzure.Create(Uri clusterName,storageAccount, String storageKey, String container, Boolean
浏览 0
提问于2015-04-27
得票数 0
1
回答
Hadoop
在数据放在datanodes之前是否有多个本地临时文件位置?
、
、
我想我了解
Hadoop
架构和结构的基本知识。在将数据写入datanode之前,我会得到它被缓存在本地临时文件位置中。这是每个namenode的一个文件位置
吗
?在namenode为每个namenode指定要存储在哪个datanode之前,是否存储到
集群
中的所有数据(可能来自多个上载)?或者
Hadoop
甚至
可以
处理来自
不同
位置的多个同步上传(例如,多台计算机将
浏览 4
提问于2015-01-09
得票数 0
回答已采纳
1
回答
纱线日志. stdout和stderr变成了巨大的文件--如何避免
、
、
亲爱的朋友和学院因此,我将解释这个问题:我的问题是-有可能限制这些文件
吗
?20G 712K 100% /grid/sdb/grid
浏览 0
提问于2019-02-13
得票数 1
1
回答
在为Starburst Presto创建Azure HDInsight
集群
时,我
可以
创建星火
集群
吗
?
、
、
、
Azure HDInsight有
不同
的风格,比如
hadoop
,spark等等。在文档中,推荐使用
hadoop
集群
,但我想使用spark
集群
。 星际爆发的Presto发行版
可以
使用星火簇
吗
?
浏览 16
提问于2019-05-30
得票数 1
1
回答
如何管理配置以连接到多个
Hadoop
集群
?
管理多个
Hadoop
集群
的客户端配置的最佳实践是什么?所谓“客户端”,指的是一台机器,它不是
集群
的一部分,而是被某些人用来向其提交作业。我
可以
想到两种可能性:
不同
的虚拟机,每台虚拟机都为一个
集群
配置,或者只是在同一台机器上的
不同
目录中提取和配置工具。但我不确定其中一种是否明显优于另一种,或者是否有其他选择。对于很多使用
Hadoop
的人来说,这似乎是一个普遍的问题,但我将以我的具体情况为例。我
可以
访问一个大型
Hadoop</em
浏览 3
提问于2014-06-05
得票数 1
回答已采纳
2
回答
HDFS主目录
、
、
、
我已经设置了一个单节点多用户
hadoop
集群
。在我的
集群
中,有一个管理员用户负责运行
集群
(超级用户)。为所有其他用户分配一个hdfs目录,如/home/xyz,其中xyz是
用户名
。在unix中,我们
可以
在/etc/passwd中更改用户的默认主目录。默认情况下,用户的登录目录是主目录。 如何在
hadoop
for hdfs文件系统中执行此操作。例如,如果用户在unix提示符下输入:$
hadoop
dfs -ls。
浏览 1
提问于2012-04-09
得票数 5
回答已采纳
2
回答
不能用直线连接到蜂箱,用户根目录不能模拟匿名。
、
、
connect jdbc:hive2://localhost:10000连接到蜂箱,并被要求提供
用户名
和密码 由于我不知道我应该输入什么
用户名
或密码(org.apache.
had
浏览 1
提问于2017-04-03
得票数 8
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
hadoop,spark在虚拟机集群里跑还有性能上的优势吗?
视频号小店不同的商品可以设置不同的收货地址吗?怎么设置?
不同行业可以使用相同mes系统吗?
微信电话可以录音吗?苹果与华为手机大不同
运营Google Ads,我可以在不同的广告组投放相同的关键字吗?
热门
标签
更多标签
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
活动推荐
运营活动
广告
关闭
领券