我有一个非常基本的气流工作流程和一个我似乎无法克服的小障碍。所以我的目标是有两组任务。首先，第一组应该运行，然后是下一组。问题是，在组2中，我需要创建对组1中的任务的依赖关系。如果组1中的某个任务失败了，那么我们可以跳过它对组2的依赖关系。(粉色表示跳过)：
因此，我正在寻找一种动态设计这种依赖关系<em
浏览 6提问于2020-02-11得票数 1
回答已采纳
在DAG中是否有自定义电子邮件和发送任何任务失败的选项。有一个类似‘email _on_failure’的选项: True，但它不提供动态添加内容到电子邮件主题或正文的选项。我的DAG将如下所示from airflow.contrib.operators.databricks_operatorimport BashOperator
from airflow</em
浏览 2提问于2018-08-07得票数 7
回答已采纳
有两个dags --父级和子级，父级有自己的调度，假设'30 *** '，子'1 -17***-5‘，子节点等待父级执行，例如40分钟，如果父级以错误结束，那么子类也会崩溃，否则将执行子类的下一个任务。task_id='task1', python_callable=check) status >> t
浏览 5提问于2021-03-06得票数 4
在airflow.models.BaseOperator中。您有两个默认参数：根据医生
浏览 2提问于2017-12-25得票数 4
回答已采纳
我正在使用邻接表的修改版本来存储分层数据。这样就创建了一棵这种树。
在mysql模式中也是这样表示的：
最好的方法是删除C之间的节点，以致子节点F，G现在是A的子节点？
浏览 1提问于2017-02-09得票数 1
我有一个webapp，它有一个包含自身集合的对象。我很难在MySQL数据库中对此进行建模。它是一个Task对象，它包含子任务列表。中的主键，也是表任务中taskID的外键(同样，它们都是SubTaskMap中的任务对象)。据我所知，要运行查询以查找与此设置中的parentTaskID关联的所有任务，我必须创建任务表的别名。我在MS Access中
浏览 4提问于2015-09-10得票数 4
回答已采纳
1回答
我们正在探索使用Apache Airflow来取代当前ETL的orchestrator工具。我们目前的ETL有600多个不同的任务，具有复杂的依赖关系。这些任务主要是对Informatica PowerCenter工作流的调用，但也有少量数据库过程和shell脚本 为了测试UI，我创建了一个包含600个任务的DAG。我没有使用我创建的实际自定义操作符，而是使用了开
浏览 21提问于2020-04-04得票数 2
我有每个项目的2级文件和一个父级文件。如何创建此依赖关系？我尝试将依赖项添加到build.gradle文件中，如下所示： dependencies {
compile project ('
浏览 3提问于2018-10-17得票数 0
回答已采纳
1回答
假设我有一个maven父POM root，它在依赖关系管理中定义了foo:bar:1.0.0。我有另一个父POM parent，它使用root作为父级(只是为了向示例添加另一个层)。最后，我有一个材料清单bom，它使用root作为它的父对象，但是在其依赖关系管理中重新定义了foo:bar:2.0.0。在我的项目app中，我继承了parent，然后在app的依赖<e
浏览 0提问于2019-05-30得票数 5
回答已采纳
我是新来的，听说我可以在这里找到好的答案，所以我注册了，现在我写下了我的问题。你对java类库或任何有用的东西有什么想法吗?它可以从数据库中的表生成XML SCHEMA，比如java中的sql server。我是java的新手，所以如果可能的话，我需要一些基本的指南。问候你，雪莉
浏览 0提问于2012-05-17得票数 2
2回答
我在一个关系数据库中有一堆表，很明显，由于外键关系，这些表是相互依赖的。我想构建一个依赖树，遍历它，并输出INSERT SQL语句。我需要首先为依赖关系树中的外键表输出SQL，因为父表将依赖于它们的外键标识符表中的值。
后序遍历的二叉树看起来适合这项
浏览 1提问于2009-06-09得票数 0
回答已采纳
1回答
我昨天为我的日常ETL改变了一些任务之间的依赖关系。新代码将正确显示在Airflow code视图中，并且甘特图还会显示根据新代码运行的内容。但是，Graph View仍然显示旧的依赖关系。
浏览 1提问于2018-09-05得票数 1
如何使用Rails/ActiveRecord创建多态has_and_belongs_to_many关系？我看到的大多数示例都涉及创建一个belongs_to关系，该关系将我的多态方面限制为只与一个父级相关：表: Tasks_Targets表: SoftwareSystem据我所理解，如果我实现多态关系(如大
浏览 3提问于2009-07-14得票数 1
1回答
具有相同实体的一对多
、、、、
我正在从数据库模式(使用Hibernate)进行逆向工程，我希望在生成的实体中包含以下内容： ...List<Task> dependentTasks = new ArrayList<Task>(0);}public class TaskTask task;
List<Task> dependentTasks = new ArrayList<Tas
浏览 0提问于2010-12-19得票数 0
回答已采纳
1回答
一个名为Task的实体，具有一个名为name的属性。任务可以具有任务依赖关系，包括必须在完成任务之前完成的任务父级。任务具有与子项相反的子项，这些子项要求在完成自身之前完成任务。
浏览 0提问于2015-07-02得票数 0
在我的本地机器上，我创建了一个虚拟环境并安装了Airflow。当dag或plugin需要python库时，我会通过pip将其安装到相同的virtualenv中。如何跟踪哪些库属于dag，哪些库用于airflow本身？我最近删除了一个dag，并想移除它正在使用的库。这相当耗时，我祈祷我没有删除正在被另一个dag使用的东西！
浏览 5提问于2019-07-04得票数 9
用户查询将产生一个列表，我需要确保当我返回任务时，他们填充了所有属性，包括父级、子级、依赖项和属性。首先，让我解释所涉及的两个实体对象。
任务是层次结构的一部分。它可以有父任务，也可以有子任务。任务可以依赖于其他任务，由“依赖关系”属性表示。任务可以具有许多属性，由属性属性表
浏览 0提问于2014-06-21得票数 17
回答已采纳
2回答
我做了一个样本表来展示我的问题：。其他tasksCompleted状态的依赖项-由用户提供Tasks单张：
Task NameUser Input - Is Completed -用户将指定任务是否为completedFormula - Are Pre-Requi
浏览 3提问于2019-09-24得票数 0
2回答
我怀疑将运行所有上游任务，但它不会。当它看到并不是所有的依赖任务都在运行时，它将会简单地失败。如何运行特定任务及其所有依赖项？我猜这是不可能的，因为气流设计的决定，但有没有办法绕过这个？
浏览 3提问于2017-03-07得票数 11
最近，我将Airflow从1.9升级到1.10.3 (最新版本)。
但是，当放大SubDag时说，而它<em
浏览 2提问于2019-05-09得票数 12
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
腾讯会议
云直播
对象存储活动推荐
腾讯云开发者
