腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
如何确定
DAG
在
气流
中
是否
暂停
/未
暂停
?
、
、
、
我想
暂停
空闲和冗余
的
DAG
,我如何知道哪些
DAG
未
暂停
,哪些
DAG
已
暂停
? 因此,我有一个要使用执行
airflow
pause <
dag
_id>
的
have命令
取消
暂停
的
DAG
的
列表。我想通过检查
每个
DAG
的
pause状态来了解命令是否成功。我已经检查了
ai
浏览 0
提问于2018-12-27
得票数 4
2
回答
Airflow
在
定义
中
取消
每个
dag
的
暂停
、
、
是否有任何方法可以保留服务器
的
默认设置。..。但是对于一个特定
的
dag
,默认情况下是否将其
定义
为未
暂停
?
dag
=
DAG
( default_args=default_args, schedule_interval
浏览 3
提问于2017-07-27
得票数 5
8
回答
气流以编程方式解除
暂停
?
、
、
我有一个进程,我们将部署到多个不同
的
气流实例,
在
我们
的
airflow
.cfg
中
,我们有dags_are_paused_at_creation = True,但是对于这个特定
的
进程,我们希望通过单击UI来打开它有办法以编程
的
方式完成吗?
浏览 8
提问于2017-06-05
得票数 16
回答已采纳
3
回答
如何阻止
DAG
回填?catchup_by_default=False和catchup=False似乎不工作,回填
的
气流调度程序
、
在
airflow
.cfg
中
设置catchup_by_default=False似乎不起作用。此外,将catchup=False添加到
DAG
也不起作用。这是
dag
的
设置。我只是在用。default_args = { "owner": "
a
浏览 1
提问于2018-09-05
得票数 4
1
回答
气流-相同
DAG
并行运行
的
单个
DAG
的
暂停
/
取消
暂停
我想知道是否有一种方法可以
在
并行运行
DAG
时停止/启动单个
DAG
。
dag
_id上
的
暂停
/
取消
暂停
似乎是
暂停
/
取消
在
一个守护进程下运行
的
所有
dag
。相反,我们希望
暂停
单个dagruns (或其中
的
任务)。让我知道这是否可以
在
气流
中
实现。 如果不可能,这里还有我正在考
浏览 1
提问于2020-08-27
得票数 1
回答已采纳
1
回答
Airflow
任务没有启动,却停留在“运行”状态
我对
Airflow
完全陌生,我真的很难让一个非常简单
的
测试
DAG
运行: from
airflow
import
DAG
from
airflow
.operators.bash import BashOperator }
dag
= <em
浏览 133
提问于2021-02-01
得票数 1
回答已采纳
1
回答
无法
在
Airflow
UI
中
暂停
或
取消
暂停
DAG
我
在
Airflow
UI
中
遇到无法
暂停
或
取消
暂停
DAG
的
问题。我
在
浏览器网络控制台中看到了这个400错误。这似乎就发生在最近
的
气流构建中。我一直
在
使用1.10.10版本。is_paused=true&
dag
_id=test_
dag
400
浏览 1
提问于2020-07-28
得票数 0
1
回答
手动触发时气流解除
暂停
、
我使用
的
气流2.2.2,并有一个
dag
,这是计划运行每10分钟,并
暂停
。我正在尝试使用气流客户端手动调用它。
Dag
没有被
取消
暂停
,dagrun也
在
排队,声明。
在
创建
dag
运行时,是否可以
在
不调用其他API调用
的
情况下使用气流客户端来
取消
dag
。api_instance =
dag
_run_api.DAGRunApi(api_client)
浏览 6
提问于2022-05-16
得票数 1
1
回答
Airflow
DAG
任务
在
我运行
DAG
时不运行,尽管任务
在
测试时工作正常
、
我
在
代码
中
定义
了以下
DAG
: from datetime import timedelta, datetimefrom
airflow
import
DAG
data-push-for-red data-push-for-yellow 然后,我通过
在
终端<em
浏览 49
提问于2020-08-02
得票数 1
回答已采纳
1
回答
如何用AWS Lambda禁用气流
DAG
、
、
我需要用AWS、Lambda或其他方法禁用气流
DAG
。为了做到这一点,我可以使用python代码吗?提前谢谢你。
浏览 3
提问于2022-03-08
得票数 0
回答已采纳
2
回答
新dags
的
部署过程
我需要一些建议,如何重新启动所有的气流服务部署,而不杀死在任务
中
的
工人。 更新“当前”simlink以指向我
的
新版本。我想在脚本
中
添加某种类型
的
监视,以
暂停
所有DAGs,等待工作人员空闲,然后重新启动服务,但气流CLI无法了解启用
浏览 3
提问于2016-11-22
得票数 6
回答已采纳
5
回答
从不工作
的
终端触发气流
DAG
、
我正在尝试使用
airflow
来
定义
我想要从命令行手动触发
的
特定工作流。 "
DAG
_NAME", schedule_interval=None,default_args=args)
airflow
tr
浏览 2
提问于2016-05-05
得票数 24
1
回答
气流调度器连续
暂停
运行
、
气流网服务器气流调度器继续运行
DAG
from
airflow
import
DAG
浏览 0
提问于2018-03-17
得票数 7
4
回答
Apache
Airflow
DAG
无法导入本地模块
、
、
我似乎不了解如何将模块导入到apache
airflow
DAG
定义
文件
中
。例如,我想这样做是为了能够创建一个库,使具有类似设置
的
声明任务不那么繁琐。这是我能想到
的
重复这个问题
的
最简单
的
例子:我修改了
airflow
教程(https://
airflow
.apache.org/tutorial.html#recap),只需导入一个模块并从该模块运行一个
定义
defintion
浏览 197
提问于2017-12-28
得票数 29
回答已采纳
3
回答
示例
DAG
无限期地停留在"running“状态
在
我对
airflow
的
第一次尝试
中
,我尝试运行安装附带
的
一个示例DAGS。这是v.1.8.0。以下是我
的
步骤:[2017-04-19 15:32:38,391] {__init__.py:57} INFO-19 15:32:38,676] {models.py:167} INFO - Filling up the DagBag from /Users
浏览 10
提问于2017-04-20
得票数 31
1
回答
如何知道composer
airflow
中
是否存在
暂停
的
DAG
?
、
、
、
通过GCP命令将文件上传到
DAG
文件夹后,我想检查是否创建了
DAG
。我可以知道检查是否创建了
暂停
的
DAG
的
命令吗?在这个问题中,我提到了"Pause
DAG
“,因为我使用
的
是"core-dags_are_paused_at_creation=true”配置。 存在load_dags,但它仅返回未
暂停
的
DAG
。
浏览 3
提问于2020-01-14
得票数 0
1
回答
云编写器将自
定义
插件导入到所有现有的dags
中
。
、
我正在使用Composer来调度多个
DAG
。这些
DAG
是使用动态构建
的
,它们使用自
定义
插件。 将插件上载到Composer集群
的</em
浏览 3
提问于2020-08-24
得票数 0
5
回答
气流: webserver找不到新
的
DAG
。
、
在
气流
中
,我应该如何处理错误“此
DAG
在
webserver DagBag对象
中
不可用,它显示在此列表
中
,因为调度程序将其标记为元数据数据库
中
的
活动”?我将一个新
的
DAG
复制到一个气流服务器上,并尝试: 停止webserver和调度器,重置数据库运行
浏览 7
提问于2017-04-28
得票数 19
1
回答
气流:如何从python脚本
中
取消
DAG
、
我正在创建一个python脚本来从模板生成
DAG
(生成一个带有
DAG
规范
的
新python文件)。除了我需要以不可
暂停
的
方式生成
DAG
之外,这一切都很好。我搜索并尝试
在
脚本
中
运行shell命令,如下所示: bash_command2 = '
airflow
trigger_
dag
'(ba
浏览 1
提问于2018-11-16
得票数 2
回答已采纳
3
回答
气流:日志文件不是本地
的
,不受支持
的
远程日志位置
、
、
我无法从气流UI中看到附加到任务
的
日志:
airflow
.cfg文件
中
与日志相关
的
设置如下: child_process_log_directory= /home/my_pro
浏览 3
提问于2017-08-03
得票数 13
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
调度工具Airflow
迁移工具 Air2phin 宣布开源,2 步迁移 Airflow 至 Dolphinscheduler
大规模运行Apache Airflow的经验和教训
airflow 实战系列:基于 python 的调度和监控工作流的平台
没看过这篇文章,别说你会用Airflow
热门
标签
更多标签
云服务器
ICP备案
腾讯会议
云直播
对象存储
活动推荐
运营活动
广告
关闭
领券