腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
使用
Oozie
执行
协调
器
操作
的
输入
条件
、
、
、
我是新来
的
。我想要将我
的
协调
器
配置为只有在我
的
输入
文件夹中出现四个文件时才
执行
。我在
oozie
文档上做了一些搜索,我发现我可以对数据集
使用
Input-event。
浏览 35
提问于2019-09-25
得票数 0
回答已采纳
2
回答
我应该永远
使用
oozie
来运行MapReduce任务吗?
、
、
我有一个mapReduce任务(),它读取文件夹中
的
文件,并将它们附加到zip中。我需要永远运行这个任务,所以当它完成处理它们时,它应该再次运行。我正在读关于
oozie
的
文章,但我不确定它是否最适合我,因为也许它对我
的
问题来说太大了。对任务
的
解释 文件夹总是相同
的</em
浏览 3
提问于2012-06-28
得票数 1
1
回答
从失败节点重新运行
Oozie
协调
器
操作
、
、
我试图
使用
下面的命令重新运行一个
oozie
协调
器
操作
。
oozie
oozie
-rerun -action -Doozie.wf.rerun.fail.nodes=true 但是它从一开始就
执行
操作
,而不是从失败节点
执行
它。
协调
者忽略了'
oozie
.wf.rerun.fail.nodes=true‘选项。我会错过提供一些选择吗?
浏览 7
提问于2017-02-09
得票数 6
回答已采纳
2
回答
Oozie
输出-事件
、
、
、
我不明白Ozzie中
的
输出事件有什么用。Ozzie文档声明“一个
协调
器
操作
可以产生一个或多个数据集实例作为输出”,但它没有给出任何实际
的
细节或示例。产生一个dataset实例作为输出意味着什么?这是否意味着Ozzie将通过数据集
的
URI模板创建一个文件夹作为输出?我真的不明白为什么我要
使用
输出evets… 谢谢!
浏览 0
提问于2012-10-29
得票数 3
回答已采纳
3
回答
如何停止
Oozie
协调
器
?
、
、
我运行了一个
Oozie
协调
器
,它每小时运行一个工作流。我没有它
的
id,当我运行
oozie
jobs -
oozie
http://localhost:11000/
oozie
命令时,它只显示工作流作业,没有
协调
器
。我想停止这个
协调
器
的
进一步处理,我该怎么做呢?
浏览 2
提问于2015-06-04
得票数 3
1
回答
Oozie
工作失误时
的
行为
、
我有一个
Oozie
协调
员
的
工作设置运行在12点
协调
世界时,每天。我正在寻找一种机制,
使用
它我可以要求
Oozie
重新运行那些由于
Oozie
服务
器
故障而错过
的
任务。我理解,通过workflow.xml文件中
的
SLA参数,我可以指定SLA
的
任务期限和电子邮件联系人,但不确定在以下情况下会发生什么:
oozie
作业计划于
协调
世界时07 :05时运行。但是,
oo
浏览 8
提问于2016-07-10
得票数 0
1
回答
Oozie
没有清理
Oozie
数据库中
的
旧作业
、
、
我
的
oozie
-site.xml中设置了以下属性(在Cloudera中
使用
安全阀)
oozie
.service.PurgeService.coord.older.than - 7
oozie
.service.PurgeService.bundle.old
浏览 3
提问于2015-08-11
得票数 1
1
回答
在
oozie
工作流中获取当前时间
、
我有一个需要将当前日期从
oozie
工作流传递到pig脚本
的
用例。我知道我可以从pig获取当前日期,但我
的
情况不同,在
操作
完成后,我必须从
oozie
传递它。你知道怎么做到这一点吗?我还有一个
协调
器
任务,它将每小时
执行
一次。那么如何将
协调
器
的
执行
日期传递给工作流呢?
浏览 4
提问于2014-02-13
得票数 5
回答已采纳
2
回答
Oozie
:
oozie
生成输出事件吗?
、
、
在
oozie
中,input-events非常简单,如果指定
的
文件/文件夹不存在,
协调
器
作业将保持在WAITING状态。但我不明白output-events做了什么。根据我
的
理解,在output-events标记中指定
的
文件/文件夹应该由
oozie
创建,以防所有指定
的
操作
都成功。但这是不可能
的
。我也找不到任何相关
的
日志。这方面的文件也不清楚。所以,问题是,
Oozie</em
浏览 2
提问于2015-10-20
得票数 5
回答已采纳
1
回答
限制AWS数据管道上
的
并发
执行
、
有办法限制AWS数据管道上
的
并发
执行
吗?我们需要把同时处决限制在1。来自
oozie
的
医生: 并发性:可以同时运行
的
该作业
的
最大
操作
数。该值允许实现和提交
协调
器
应用程序
的
多个实例,并允许
操作
赶上延迟处理。默认值为1。
浏览 1
提问于2018-02-09
得票数 0
回答已采纳
1
回答
使用
oozie
包有什么好处?
、
我并没有真正理解
使用
oozie
包
的
好处。对我来说,它只是一个参数
的
集合,
协调
员共享,但没有额外
的
控制。如果您没有在这里硬编码这些参数,这只是一个“网关”或属性
的
另一个视图,您必须存储在属性文件或环境变量中。我想这是有价值
的
,只是我没有得到。
浏览 1
提问于2017-08-07
得票数 1
1
回答
如何
使用
oozie
协调
器
延迟工作流
操作
、
、
、
、
我有一个
oozie
协调
器
和工作流作业,当我
的
一个工作流
操作
完成时,我需要在一段时间后开始下一个
操作
,比如说50分钟。我是否可以从
oozie
工作流或
oozie
协调
器
将其配置为等待一段时间来
执行
下一个
操作
(取决于上一个
操作
和由上一个启动
的
一些异步任务)。
协调
器
xml <coordinator-app name
浏览 22
提问于2017-02-03
得票数 0
1
回答
使用
keytab提交
oozie
作业
、
、
、
、
我
使用
keytab文件绕过kerberos通过
oozie
运行shell脚本。Shell脚本包括hbase命令,因此我需要在运行hbase之前
执行
kinit,commands.This对我来说很好。因此,如果我
使用
协调
器
启动作业,并
使用
keytab (服务帐户)在工作流中
使用
多个shell脚本,那么
oozie
中会出现冲突吗?因为我
使用
oozie
协调
器
启动任务,但是在
浏览 3
提问于2014-10-17
得票数 1
回答已采纳
1
回答
如果
协调
器
操作
失败,如何挂起
Oozie
协调
器
?
、
、
在我
的
用例中,
协调
器
操作
的
输出将在下一次迭代中
使用
,因此,如果其中一个
操作
失败,未完成/损坏
的
数据将被
输入
到下一个
协调
器
操作
中。如果
协调
器
操作
中
的
工作流步骤之一失败,是否有方法挂起
Oozie
协调
器
?delete path='${outpu
浏览 3
提问于2016-07-21
得票数 0
回答已采纳
1
回答
Oozie
协调
员应用程序
的
启动时间和结束时间相差不超过一个小时。
、
我
的
oozie
协调
员
的
应用程序有问题。基于观察
的
概括:如果我在这里漏掉了什么,请提出建议。
使用
Oozie
2.0,尝试
使用
一个基本
的
协调
程序,该应用程序运行良好,适用于: start = "2012-09-07 13:00Z“end = "2012-09-0
浏览 3
提问于2012-09-10
得票数 1
3
回答
Oozie
工作流、
协调
程序和捆绑包之间
的
区别是什么
、
、
、
Oozie
工作流、
协调
器
和捆绑包有什么不同?我猜它再次被用来调度一组
协调
器
。那么为什么不能
使用
一个
协调
器
来调度其他
协调
器
,就像一个工作流
浏览 0
提问于2015-10-23
得票数 14
回答已采纳
2
回答
如何通过shell脚本调用
oozie
工作流,并阻塞/等待工作流完成
、
、
、
、
我已经
使用
Oozie
创建了一个工作流,它由多个
操作
节点组成,并且能够成功地通过
协调
器
运行这些节点。 我想通过包装
器
shell脚本调用
Oozie
工作流。包装
器
脚本应该调用
Oozie
命令,等待
oozie
作业完成(成功或错误),并返回
Oozie
成功状态代码(0)或失败
的
oozie
操作
节点
的
错误代码(如果
oozie
工作
浏览 1
提问于2015-06-20
得票数 5
1
回答
使用
cron表达式给出错误
的
Oozie
协调
器
调度
、
、
、
我已经安排了一个
使用
cron表达式频率=“203** 2-4”
的
协调
器
,但是它会产生错误。
oozie
协调
器
日志上写着"java.lang.IllegalArgumentException“:参数frequency=20 3** 2-4必须是整数。
输入
字符串
的
解析错误:“203** 2-4”
浏览 0
提问于2017-07-25
得票数 0
1
回答
运行
Oozie
工作流中
的
并发:多少以及如何限制
、
、
假设我们有一个
Oozie
工作流,它有一个复制
操作
节点,然后是一个Shell
操作
节点。我是否可以启动这样
的
OOzie
工作流
的
多个实例并并行运行它们?并发数量可能会达到数千甚至数百万级,这会怎么样呢?这是可能
的
吗,或者甚至
Oozie
支持这么高级别的并发性? 如果不是,那么我们将不得不考虑节流,并对并发
Oozie
工作流实例
的
数量设置上限。我们更喜欢在服务
器
/
Oozie
端(基本
浏览 2
提问于2014-02-07
得票数 5
回答已采纳
4
回答
哪个是HADOOP
的
最佳调度程序。
oozie
还是cron?
谁能建议哪一个是最适合Hadoop
的
调度
器
。如果是
oozie
的话。
oozie
和cron作业有什么不同。
浏览 0
提问于2015-04-15
得票数 6
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
热门
标签
更多标签
云服务器
ICP备案
云直播
对象存储
实时音视频
活动推荐
运营活动
广告
关闭
领券