腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
如何
在
OOZIE
中
使用
正则表达式?
、
、
、
、
我想
检查
文件
是否
存在于
给定的
HDFS
位置
。我们可以
检查
文件
是否
存在于
给定的
HDFS
位置
,借助fs:exists,即 如果
文件
名为test_25082016,在协调作业的帮助下,我们可以获得日期值,即在我们的示例中作为参数today。但在我的示例中,我的
HDFS
位置
中有如下
文件
名。示例:test_25082016
浏览 7
提问于2016-08-25
得票数 0
回答已采纳
1
回答
如何
使用
oozie
检查
文件
是否
存在于
HDFS
位置
?
、
、
、
、
如何
使用
Oozie
检查
HDFS
位置
中的
文件
是否
存在?但是,
如何
验证
HDFS
中
浏览 3
提问于2016-08-19
得票数 6
回答已采纳
2
回答
无法
使用
Oozie
部署火花作业
、
、
我需要保持一个火花作业运行24/7,为此,我正在
使用
Oozie
。为此,我编写了一个workflow.xml和job.properties
文件
,其中包含了调用它所需的信息。但是,当我尝试
使用
以下方式发送
oozie
作业时:我收到以下错误消息,非常清楚: java.io.IOException(OozieCLI.jav
浏览 4
提问于2016-11-15
得票数 1
回答已采纳
3
回答
Rest用于通过HUE创建
Oozie
工作流
、
、
我通过Hue界面创建了一个
Oozie
工作流。我对此几乎没有什么疑问。 我可以看到创建的工作流XML。但是我没有看到job.properties
文件
。Job.properties存储在哪里?有REST来提交通过编写workflow.xml和job.properties创建的
Oozie
作业。对于通过HUE创建的
oozie
工作流,REST将是什么?任何样本都会有帮助。
浏览 0
提问于2015-02-03
得票数 1
回答已采纳
1
回答
在
oozie
中
使用
正则表达式
检查
文件
名格式
、
、
我想
检查
在给定的
HDFS
位置
中
是否
存在具有特定名称的
文件
。我的
文件
名类似于:TEST_20190930.csv 我在互联网上搜索了一下,发现fs:exists可以帮助我们
检查
这个。我想
检查
我的协调器
oozie
是否
存在具有所提到的名称(Test_20190930)的
文件
,其中20190903是在
HDFS
上接收
文件
的日期。
浏览 9
提问于2019-10-01
得票数 0
2
回答
如何
在
OOZIE
的决策节点中动态获取
文件
名?
、
、
、
、
我想要
检查
文件
是否
存在,在
HDFS
位置
使用
oozie
批处理。在我的
HDFS
位置
中,每天晚上11点,我将得到"test_08_01_2016.csv“、"test_08_02_2016.csv”这样的
文件
。所以我想要
检查
文件
是否
存在在11.15 PM之后,我可以在不
使用
决策节点的情况下
检查
文件
浏览 0
提问于2016-08-22
得票数 2
回答已采纳
3
回答
哪个用户在通过协调程序提交作业时模仿
oozie
?
、
、
用户模拟/传播在
oozie
中是
如何
工作的?
浏览 1
提问于2014-10-10
得票数 0
回答已采纳
2
回答
如何
在特定条件下触发
Oozie
作业?
、
、
、
我有一个
文件
夹,其中存储了我所有的应用程序日志
文件
。如果在
文件
夹中创建了新的日志
文件
,我的
oozie
应该立即触发一个Flume作业,该作业将把我的日志
文件
放到
HDFS
中。
如何
在
文件
夹中创建新的日志
文件
时触发
Oozie
作业?非常感谢任何关于这个话题的帮助!
浏览 1
提问于2013-12-21
得票数 0
1
回答
Oozie
电子邮件动作附件
、
、
、
、
我试图得到一个
hdfs
的
位置
,并提供它作为电子邮件附件的
oozie
电子邮件行动。只有
使用
shell操作才能找到我的
hdfs
位置
。现在,
如何
将shell操作的输出传递给我的
oozie
电子邮件操作,这将是
hdfs
路径。这能用
oozie
来实现吗?<workflow-app name="[WF-DEF-NAME]" xmlns="uri:
oozie
:workflow:0.
浏览 1
提问于2016-01-27
得票数 1
回答已采纳
1
回答
错误:找不到org.apache.
oozie
.action.hadoop.PigMain
、
、
我试图通过
oozie
工作流执行一个简单的猪脚本,该工作流导入python和其他jar,并最终得到以下错误:java.lang.RuntimeE
浏览 2
提问于2015-08-11
得票数 0
3
回答
E0701工作流中的
OOZIE
XML架构错误
、
以下是我的workflow.xml<start to="createtimelinetable" /> <sqoop xmlns="uri:
oozie
:sqoop-action:0.3">然而,<
浏览 0
提问于2014-05-14
得票数 2
回答已采纳
1
回答
Oozie
找不到工作流
文件
、
HDFS
中存在
文件
: 在
oozie
上尝试同样的方法:
oozie</em
浏览 1
提问于2016-10-24
得票数 0
1
回答
未能加载db驱动程序类
oozie
失败: oracle.jdbc.OracleDriver
、
在
使用
oozie
执行sqoop导出命令(在shell脚本中)时,我得到了以下错误。我将ojdbc6.jar添加到以下
位置
。/opt/cloudera/parcels/CDH-5.7.1-1.cdh5.7.1.p0.11/lib/sqoop/lib/ /user/
oozie
/share/lib/sqoop/和/user/
oozie
/shar
浏览 5
提问于2017-10-10
得票数 2
3
回答
权限被拒绝配置单元+
oozie
、
、
当我运行
oozie
worflow时,出现以下错误。在
oozie
控制台的job configuration选项卡下,显示hivesitepath属性,但未加载。<init>(FileOutputStream.java:110) at org.apache.
oozie
.action.hadoop.Hi
浏览 3
提问于2014-01-15
得票数 1
1
回答
如何
在
oozie
工作流中从xml加载参数
、
我想为
oozie
作业加载xml属性
文件
中的属性。该
文件
可以由-conf参数指定。
文件
应该放在哪里,以便
oozie
可以在作业开始时拾取属性
文件
。在此示例中,action.xml
文件
被指定为参数
文件
,但未指定
位置
。
oozie
查找属性的默认
位置
是什么,以及
如何
提供自定义
位置
。工作流将从
HDFS
位置
运行。
浏览 1
提问于2016-01-15
得票数 1
1
回答
oozie
工作流的最大限制
、
、
、
有人知道可以并行执行的
oozie
工作流的最大限制是多少吗? 我并行运行了35个工作流(或者这就是
oozie
UI提到的,它们都是并行启动的)。所有子工作流都执行从本地到
HDFS
的
文件
摄取&从此以后对
文件
的元数据执行一些验证
检查
。就这么简单。然而,我看到一些子工作流在执行过程中失败了;它们失败的步骤试图将
文件
放到
HDFS
位置
,即进程无法执行
hdfs
dfs -put命令。但是,当我重新运行这些子工作流时,它们会
浏览 3
提问于2017-10-25
得票数 0
1
回答
如何
在aws S3中出现成功
文件
时触发
oozie
作业
、
、
、
、
我正在与
oozie
一起执行
HDFS
数据传输操作,要求在aws S3存储桶中有可用的数据时触发
oozie
工作流作业。我正在考虑在我的S3存储桶中保留一个成功
文件
和数据
文件
,但我不确定
如何
让
oozie
协调器定期从S3读取,以
检查
成功
文件
是否
可用。如果有人能提供同样的coordinator.xml样本,那就太好了。
浏览 3
提问于2017-04-17
得票数 1
3
回答
如何
在
oozie
工作流中
检查
分区数据集?
、
、
、
、
如何
使用
决策节点
使用
oozie
工作流
检查
分区
位置
是否
存在。示例: /user/cloudera/year=2016/month=201609/day=20150912 在我的
hdfs
位置
,我每天都会得到一个如上所示的数据集。nominalTime(), "America/Los_Angeles"), -1, 'DAY'), '
浏览 8
提问于2016-09-12
得票数 0
回答已采纳
1
回答
Cloudera错误-java.lang.NoSuchFieldError: IS_SECURITY_ENABLED试图访问此字段
、
、
、
、
在
oozie
中有任何选项可以预定义从
oozie
共享库中选择jar的顺序吗?
浏览 3
提问于2017-03-01
得票数 2
1
回答
24小时后无法在缓存中找到由于令牌而启动的火花启动器作业
、
、
、
、
我有一个Java应用程序,它可以连续运行,并
检查
数据库中的表
是否
有新的记录。当在表中添加一个新记录时,Java应用程序执行解压缩
文件
并将其放入
HDFS
位置
,然后触发一个火花作业(我是在Java中
使用
'SparkLauncher“类编程触发火花作业),该类处理在
HDFS
位置
中新添加的
文件
我已经
使用
Oozie
Java Action计划了集群中的Java应用程序。该簇为HDP核化簇。 这份工作
浏览 0
提问于2017-07-01
得票数 0
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
在shell中如何判断HDFS中的文件目录是否存在
将 Oozie 迁移到 CDP
如何使用Oozie API接口向非Kerberos环境的CDH集群提交Java作业
法律行业错别字检查:如何使用校对工具确保法律文件的准确性?
从入门到精通-Fayson带你玩转CDH
热门
标签
更多标签
云服务器
ICP备案
对象存储
腾讯会议
云直播
活动推荐
运营活动
广告
关闭
领券