腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
oozie
错误
:
不允许
访问
本地
文件系统
hdfs
、
sqoop
、
oozie
作为
oozie
作业运行时,Sqoop导入操作出现
错误
。 我使用的是一个伪分布式hadoop集群。我遵循了以下步骤。1.启动
oozie
服务器 2.编辑的job.properties和workflow.xml文件 3.将workflow.xml复制到hdfs 4.运行
oozie
作业 我的job.properties文件nameNode=hdfs://
本地
主机:8020 jobTracker=localhost:8021 queueName=default examplesRoot=exam
浏览 15
提问于2019-05-29
得票数 0
4
回答
如何使用
oozie
将文件从
本地
移动到HDFS?
hdfs
、
oozie
我正在尝试将数据从
本地
文件系统
移动到Hadoop分布式
文件系统
,但我无法通过
oozie
移动它。我们可以使用
oozie
将数据从
本地
文件系统
移动或复制到HDFS吗?
浏览 1
提问于2015-07-16
得票数 2
3
回答
HDP 2.0
Oozie
错误
: E0803: E0803 : IO
错误
,E0603
hadoop
、
oozie
、
hortonworks-data-platform
我得到了:su -bin/
oozie
-setup.sh prepare-war cd /usr/lib/
oozie<
浏览 0
提问于2014-06-11
得票数 2
回答已采纳
2
回答
Oozie
java-action不包括core-site.xml
hadoop
、
hdfs
、
oozie
当在刚安装的Hadoop 2.2.2.4上运行
Oozie
java操作时,例如,尝试
访问
hdfs时,它
访问
错误
的
文件系统
:java.lang.IllegalArgumentException: WrongFS: hdfs:/tmp/text.txt, expected: file:///<file>hdfs:/path-to-core-site.x
浏览 3
提问于2015-10-13
得票数 1
回答已采纳
2
回答
使用
oozie
工作流的Sqoop任务,以连接拒绝异常结束
hadoop
、
sqoop
、
oozie
、
hortonworks-data-platform
我正在尝试使用
oozie
执行sqoop任务。代码结构如下所示namenode=hdfs://servername:8020queuename=default
oozie
.wf.application.path=${namenode}/user/username/
oozi
浏览 5
提问于2013-10-23
得票数 0
回答已采纳
1
回答
将文件从
本地
移动到hdfs的
Oozie
工作流
oozie
我已经编写了一个
oozie
工作流,将文件从
本地
复制到hdfs。运行作业后不会显示任何
错误
,但不会将文件放入hdfsnameNode=hdfs://localhost:8020queueName=defaultfocusNodeLogin=cloudera shellScriptPath= /home:0.1&quo
浏览 0
提问于2016-04-27
得票数 0
2
回答
如何在
Oozie
中使用MapReduceIndexerTool包含自定义命令?
hadoop
、
solr
、
cloudera
、
oozie
、
hadoop-yarn
我想要创建一个
Oozie
工作流,它将使用获取我的数据并对其进行索引。如果我只将该文件包含在我的工作流中,则会发生以下
错误
:WARN org.apache.hadoop.security.UserGroupInformation - PriviledgedActionExceptionyarn1033647717/.staging/job
浏览 7
提问于2014-11-07
得票数 0
1
回答
该示例如何在
Oozie
最佳情况下找到库?
hadoop
、
hdfs
、
oozie
根据
Oozie
的文档,我试着在
Oozie
上运行一个地图--约简示例。众所周知,'workflow.xml‘(和'coordinator.xml')应该在HDFS中。然后输入命令:
oozie
job -
oozie
http://localhost:11000/
oozie
-config examples/apps/map-reduce/job.properties我也知道'job.properties‘应该在
浏览 0
提问于2018-08-21
得票数 0
回答已采纳
1
回答
Oozie
启动HQL文件
hql
、
oozie
Heelo社区我正在参与一个大数据项目,我有以下问题: 我愿意使用
oozie
来运行hql文件,以便创建表格并将数据加载到其中,我目前使用的是hortonworks集群xith 6节点,我的问题是:我是否需要在hdfs下存储具有非常小尺寸的HQL文件,或者我可以使用集群的
本地
文件系统
。在第二种情况下,如果这些文件在
本地
文件系统
下,
oozie
将能够处理这些文件。我现在确信,我们shl=ould尽量避免在HDFS下存储小文件。非常感谢您的回复
浏览 0
提问于2018-06-12
得票数 0
1
回答
Oozie
壳牌行动问题
apache
、
bash
、
cloudera
、
oozie
我试图通过shell操作实现一个简单的ls命令,但是我面临一个
错误
,#!2<<< Invocation of Main class completed <<<
Oozi
浏览 0
提问于2013-08-01
得票数 0
2
回答
Apache加载ShareLib失败
hadoop
、
oozie
我得到了以下
oozie
.log: org.apache.
oozie
.service.ServiceException: E0104: Could not fully initialize serviceAn Admin needs to install the sharelib with
oozie
-setup.sh and issue the '
oozie
admin' CLI command toadmin -shareliblist -
oozie
http://
浏览 6
提问于2015-02-24
得票数 4
回答已采纳
1
回答
由于模拟
错误
(外卡支持),
Oozie
作业无法运行
hadoop
、
oozie
我无法在
本地
单节点hadoop集群上运行
oozie
作业,尽管我将用户"kapil.sharma02“设置为代理用户。这是我用户名中的外卡造成的吗?你能建议一种补救办法吗?/
oozie
-
oozie
-
oozie
-config ./示例/apps/map-reduce/ job .job.properties -run
错误
: E0501: E0501 :无法执行授权操作,
不允许
用户: kapil.sharm
浏览 0
提问于2016-06-12
得票数 0
4
回答
如果在SparkAction中使用PySpark,
Oozie
作业将无法运行
java
、
apache-spark
、
oozie
、
pyspark
、
cloudera-quickstart-vm
我在
Oozie
中遇到过几个SparkAction作业的例子,其中大多数都是用Java语言编写的。workflow.xml <start to='spark-node' /> <spark xmlns="
浏览 2
提问于2015-07-16
得票数 1
1
回答
如何使用
oozie
工作流将数据从HDFS复制到
本地
FS?
java
、
hadoop
下面是我的
oozie
java操作:<arg>${nameNode}/user/abhime01/haadoop/Merge/merge_output但是,如果我将它作为
本地
文件系统
中的路径(如上面的片段所示),我将得到以下
错误
: Mkdirs未能创建文件:/home/abhime01 01( cwd=file:/CDH/sdu
浏览 2
提问于2015-08-27
得票数 1
回答已采纳
2
回答
使用分支逻辑在
本地
自动执行工作流
automation
、
workflow
、
scheduler
、
airflow
、
oozie
我已经使用Apache
Oozie
和Airflow自动化了Hadoop集群中的工作流,它很容易用于指定分支逻辑。 我现在发现自己需要同样的框架来在Linux机器上
本地
自动化一个简单的管道。此管道由Bash脚本、Python脚本和分支和并行化逻辑(根据前面的输出决定下一步执行哪些作业以及执行多少作业)组成;输出应写入
本地
文件系统
。 我正试着在
本地
运行
Oozie
来实现自动化。人们真的使用
Oozie
来完成简单的自动化任务吗?或者,有没有更好的工具/框架来完成我想要做
浏览 33
提问于2019-05-21
得票数 2
1
回答
当从
oozie
运行时,nutch 1.7会将
文件系统
更改为
本地
hadoop
、
nutch
、
oozie
org.apache.nutch.crawl.Crawl hdfs://myserver/nutch/urls -dir hdfs://myserver/nutch/crawl -depth 5 -topN100我检查了源代码,每次代码这样做<
浏览 0
提问于2014-12-22
得票数 0
1
回答
Sharelib
错误
-[用户:
oozie
不允许
冒充
oozie
]
oozie
执行命令"sudo -u
oozie
./bin/
oozie
-setup.sh sharelib创建-fs hdfs://localhost:54310 -locallib
oozie
-sharelib-4.1.0.tar.gz“ 当尝试执行sharelib命令时,我得到了
错误
“E0902: Exception : User:
oozie
不允许
模拟
oozie
”。
浏览 1
提问于2016-10-06
得票数 0
回答已采纳
1
回答
Oozie
找不到工作流文件
hdfs
、
oozie
--r-- 3 user123 user123 662 2016-10-24 11:25 hdfs://nameservice/user/user123/workflow.xml
oozie
validate hdfs://nameservice/user/user123/workflow.xmlApp definition [Filedoes not exist, h
浏览 1
提问于2016-10-24
得票数 0
2
回答
从
oozie
以
本地
模式运行猪
hadoop
、
apache-pig
、
oozie
我想在
本地
模式下运行PIG,这是非常简单的 -x
本地
file.pig。 我的要求是在
本地
模式下从
OOZIE
运行?我认为
OOZIE
会首先自动启动地图任务,这是否可能?
浏览 3
提问于2015-08-03
得票数 1
1
回答
如何通过集群中的
oozie
工作流将文本文件加载到hdfs中
hadoop
、
hdfs
、
oozie
我正试图用
oozie
在母版脚本中加载文本/csv文件,并将其安排在每天的基础上。文本文件位于
本地
unix
文件系统
中。 在执行
oozie
工作流中的hive脚本之前,我需要将这些文本文件放入hdfs。
浏览 2
提问于2015-08-15
得票数 0
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
10个Hadoop相关工具,收藏了
从入门到精通-Fayson带你玩转CDH
测试最常见的21个故障模型(二)
Shopify开源WebAssembly工具链Ruvy
2.3 基于IDEA开发第一个MapReduce大数据程序WordCount
热门
标签
更多标签
活动推荐
运营活动
广告
关闭
领券