1回答
如何在OOZIE中使用正则表达式？
shell、hadoop、oozie、cloudera-cdh、oozie-coordinator
我们可以检查文件是否存在于给定的HDFS位置，借助fs:exists，即path=/user/cloudera/file/input/test_<decision name="CheckFile">
<switch>但在我的示例
浏览 7提问于2016-08-25得票数 0
回答已采纳
2回答
从bundle.properties设置Oozie包中的协调器名称
bundle、oozie、oozie-coordinator
我正在使用一个Oozie包来管理两个协调员(目前是这样)。它们是相同的过程，但对于两个不同的客户。我在启动bundle.properties时调用的bundle.xml文件中定义了客户端名称。我试图使用客户端名称来命名每个协调员，但我经常看到以下错误的变体：
错误: E0701: E0701 : XML模式错误，cvc模式-有效:值'Daily_job_#{client1}‘对于模式(a*我一直在尝试使用${}来访问变量名vs #{}，基于这里的文章：，我似
浏览 0提问于2018-02-27得票数 0
1回答
在oozie中使用正则表达式检查文件名格式
hadoop、hdfs、oozie
我想检查在给定的HDFS位置中是否存在具有特定名称的文件。我的文件名类似于：TEST_20190930.csv 我在互联网上搜索了一下，发现fs:exists可以帮助我们检查这个。我想检查我的协调器oozie是否存在具有所提到的名称(Test_20190930)的文件，其中20190903是在HDFS上接收文件的日期。
浏览 9提问于2019-10-01得票数 0
2回答
卡夫卡-> S3 -> oozie -> hadoop，Kafka写到一个S3位置，oozie每15分钟读一次这个文件夹，并将新文件推送到hadoop。
hadoop、amazon-s3、apache-kafka、oozie
既然oozie是数据的消费者，kafka是这里数据的生产者，那么我如何维护哪些文件已经被消耗，哪些文件尚未被使用，因为数据的生产者一直在写到这个位置。
浏览 5提问于2017-11-08得票数 0
3回答
如何查看Oozie日志
hadoop、oozie
我的协调器失败，出现错误:当我执行hadoop fs -ls文件名时，E0301资源文件名无效，文件名已列出。oozie job -log需要jobId。在我的例子中，我没有工作id。在这种情况下，我如何查看日志。感谢你的回复。
谢谢
浏览 8提问于2013-08-19得票数 7
2回答
如何在OOZIE的决策节点中动态获取文件名？
shell、hadoop、oozie、cloudera-cdh、oozie-coordinator
我想要检查文件是否存在，在HDFS位置使用oozie批处理。在我的HDFS位置中，每天晚上11点，我将得到"test_08_01_2016.csv“、"test_08_02_2016.csv”这样的文件。所以我想要检查文件是否存在在11.15 PM之后，我可以在不使用决策节点的情况下检查文件的存在。通过使用下面的工作流。error message[${wf:errorMessag
浏览 0提问于2016-08-22得票数 2
回答已采纳
1回答
具有CSV和xlsx文件格式的单个正则表达式
java、regex、csv
我有一个正则表达式"^[\\p{Alnum}\\_]+\\.csv$"，它实际检查文件名模式。如果模式不匹配，比如abc.csv，那么它会抛出验证错误。因为我们还需要支持xlsx格式，所以文件名也可以是abc.xlsx。有没有办法将相同的正则表达式修改为csv和xlsx的文件格式？
谢谢!
浏览 1提问于2015-06-26得票数 0
2回答
如何通过shell脚本调用oozie工作流，并阻塞/等待工作流完成
shell、blocking、oozie、error-code、oozie-coordinator
我已经使用Oozie创建了一个工作流，它由多个操作节点组成，并且能够成功地通过协调器运行这些节点。
我想通过包装器shell脚本调用Oozie工作流。包装器脚本应该调用Oozie命令，等待oozie作业完成(成功或错误)，并返回Oozie成功状态代码(0)或失败的oozie操作节点的错误代码(如果oozie工作流的任何节点失败)。从我到目前为止所看到的，我知道只要我调用oozie命令来运行一个工作流，该命令就会退出，并且作业id会在l
浏览 1提问于2015-06-20得票数 5
1回答
文件作为命令行参数在Oozie工作流中触发操作
oozie、oozie-workflow
如何将文件作为命令行参数传递给Oozie工作流中引发作业？我的spark任务是期望一个文件作为命令行参数，但是当我将该文件作为/ file /location在工作流中传递时，它并没有接收到该文件。
浏览 2提问于2019-12-17得票数 0
回答已采纳
1回答
未能加载db驱动程序类oozie失败: oracle.jdbc.OracleDriver
sqoop、oozie
在使用oozie执行sqoop导出命令(在shell脚本中)时，我得到了以下错误。/opt/cloudera/parcels/CDH-5.7.1-1.cdh5.7.1.p0.11/lib/sqoop/lib/
/user/oozie/share/lib/sqoop/和/user/oozie/share&
浏览 5提问于2017-10-10得票数 2
1回答
oozie中的org.apache.hadoop.mapred.lib.MultipleOutputs.addNamedOutput()
hadoop、mapreduce、hadoop2、mapper、reducers
我试图使用MultipleOutputs来更改减速器中的输出文件名。我使用oozie工作流来运行mapreduce作业。我无法在oozie工作流中找到添加以下属性的方法-
MultipleOutputs.addNamedOutput(job, "text", TextOutputFormat.class, Text.class
浏览 0提问于2018-04-16得票数 1
1回答
访问和操作Oozie中的日期
hadoop、oozie
我有一个Oozie工作流，它需要能够使用不同的日期格式。例如，假设我在2015年1月16日使用job.properties中的属性job.properties运行工作流。我希望能够在Oozie操作中自动使用以下路径：以及其他一些被命名为：第一个例子很简单，我只想提到我
浏览 2提问于2015-01-16得票数 2
回答已采纳
2回答
Oozie不照顾acl
hadoop、acl、kerberos、oozie
在hadoop cluser上，我设计了一个具有以下属性的oozie工作流。但是，当我试图用与提交它的用户不同的用户杀死它时，oozie返回一个错误E0508。oozie job -oozie http://localhost:11000/oozie -kill 0000000-151020102420689-oozie-oozi-WError: E0508 : E0508: User [user] not authorized for W
浏览 1提问于2015-10-20得票数 0
回答已采纳
3回答
Oozie作业错误- java.io.IOException:未指定配置
hadoop、hdfs、oozie
我已经为hive脚本创建了一个oozie工作流，用于在表中加载数据。=${nameNode}/user/oozie/share/lib当我尝试使用命令"oozie job -oozie -config /user/oo
浏览 2提问于2015-04-25得票数 9
1回答
Azure中具有if条件活动的正则表达式
azure、azure-data-factory、azure-data-factory-2
我想使用Azure Data Factory中的if condition活动检查文件名中是否包含日期模式(dd-mmm-yyy)。例如:我的文件名类似于某个字符串_23-Apr-1984.csv，其中包含日期模式。我使用Get Metadata活动获取文件名，并将其传递给if condition活动，在那里我希望检查文件名中是否包含日期模式，并根据结果执行不同的任务。我知道的唯一的方法是使用
浏览 0提问于2020-06-23得票数 0
3回答
如何检查文件夹中的所有文件是否都具有相同的格式
linux、bash、shell
我想检查它们是JPEG格式还是JPG格式。.*"folder/t351folder/t353folder/t355
我尝试使用正则表达式，但由于文件名没有扩展名，所以不起作用。谁能告诉我如何验证这些文件并检查它们是否具有特定的格式。
浏览 0提问于2012-10-12得票数 0
回答已采纳
0回答
多个文件依赖项的Oozie协调器配置
hadoop、oozie
是否可以配置Oozie协调器，以便在以下条件下触发工作流来处理每组文件：文件名在每个父/组文件夹名称中都是不同的名称。我希望oozie所做的(如果可能的话)是:扫描该特定父目录中存在的所有文件，每个文件名将是不同的，并且通常以这些分
浏览 3提问于2016-07-12得票数 0
1回答
错误: IO_ERROR : java.io.IOException:连接Oozie服务器时出错。否重试= 4.异常=连接被拒绝
浏览 2提问于2016-10-04得票数 0
回答已采纳
2回答
在AWS EMR中重新启动Oozie
hadoop、amazon-web-services、oozie、emr
我想更改Oozie电子邮件操作的发件人地址，并对oozie-site.xml进行了一些更改。我不确定如何应用我让made.Can启动和停止服务的更改，例如AWS EMR中的Oozie？
谢谢，Sai
浏览 3提问于2016-03-06得票数 2
云服务器
对象存储
ICP备案
云点播
腾讯会议
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号