腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
AIRFLOW
-
使用
API
以
编程
方式
列出
、
触发
和
停止
DAGS
、
、
我想创建python程序,可以
列出
所有活动(开/关)的
DAGS
当前在UI上。我还想通过python
触发
列表中的任何DAG或
停止
其间的DAG 有没有什么Python
API
可以做到这一点?
浏览 42
提问于2021-05-05
得票数 1
1
回答
如何动态删除DAG?
、
、
我按照中的说明动态创建
DAGs
,通过变量k修改要创建的
dags
的数量from
airflow
import DAG dag_number,我可以
使用
UI
和
CLI检查创建
浏览 16
提问于2021-02-20
得票数 2
4
回答
如何手动
触发
气流dag?
、
基本上,我已经为任务准备好了脚本
和
dag,但该任务不会定期运行。相反,它需要在随机时间激活。(外部方会告诉我们是时候了,我们将运行它。在接下来的几个月里,这种情况可能会发生很多次。)有没有手动
触发
dag的方法?也欢迎任何其他方向/建议。谢谢。
浏览 3
提问于2019-12-13
得票数 6
8
回答
气流
以
编程
方式
解除暂停?
、
、
我有一个进程,我们将部署到多个不同的气流实例,在我们的
airflow
.cfg中,我们有
dags
_are_paused_at_creation = True,但是对于这个特定的进程,我们希望通过单击UI来打开它有办法
以
编程
的
方式
完成吗?
浏览 8
提问于2017-06-05
得票数 16
回答已采纳
1
回答
是否有可能从气流1中
触发
气流2进程,反之亦然?
、
、
我们正在新旧气流之间进行迁移,我们试图实现从
Airflow
1到
Airflow
2的
触发
器(反之亦然),这有可能吗?
浏览 3
提问于2022-02-07
得票数 0
回答已采纳
2
回答
如何
使用
未来日期
触发
DAG
我想
触发
一个气流DAG在未来,所以执行日期是在明天。 这将帮助我们用明天的日期测试一个文件。当我单击execute按钮时,我会看到一个选项“
触发
器dag / config”,但没有找到任何文档。
浏览 4
提问于2022-02-04
得票数 0
1
回答
气流:发布动态创建的守护进程
我希望能够从我的代码中发布
和
触发
一个DAG对象,这个对象不受调度程序的控制(即。$
AIRFLOW
_HOME/
dags
文件夹)from
airflow
import DAG
浏览 1
提问于2018-02-28
得票数 0
回答已采纳
2
回答
如何
使用
部署在GCP Composer上的气流稳定Rest
API
[气流版本2.0.0]
、
、
Env :我们
使用
运行气流达格。目的:利用apache气流稳定apis在REST外部
触发
dags
。我们试图通过在composer:
airflow
.
api
.auth.backend.default中设置气流覆盖配置
和
发出IAP请求,
使用
气流实验apis在外部
触发
dags
。效果很好。新的稳定
api
不支持
airflow
.
api
.auth.backend.default。因此,它是投掷:
浏览 4
提问于2021-08-06
得票数 3
12
回答
DAG在Web中不可见
、
、
、
我是
Airflow
的新手。我遵循一个教程,并编写了下面的代码。from
airflow
import DAGfrom datetime importprovide_context=True, dag=dag) 在运行脚本时,它不会显示任何错误,但是当我在Menu->
DAGs
中检查
dags</e
浏览 14
提问于2016-08-17
得票数 34
回答已采纳
1
回答
使用
从S3事件调用的AWS Lambda
触发
气流DAG
、
、
现在我想解析这些文件从s3桶,并加载到MySQL数据库
使用
Apache
Airflow
。通过阅读这里的几篇文章:
和
,我认为最好
使用
AWS lambda
触发
我的
Airflow
DAG,一旦文件到达s3文件夹,它就会被调用。作为
Airflow
和
Lambda的新手,我不知道如何设置lambda来
触发
气流DAG。在这方面,如果有人能给出一些建议,那将是非常有帮助的。谢谢。
浏览 10
提问于2020-02-09
得票数 1
回答已采纳
1
回答
在气流上
使用
对接操作符安装目录不起作用
、
我试图
使用
码头操作员自动执行一些脚本
使用
气流。我想要做的是“复制”我的项目的所有文件(文件夹和文件)到容器
使用
这段代码。) 当我
使用
气流执行这个DAG时,我得到了对接者找不到/home/letyndr/
airflow
/
dags
/ml-intermediate/script.sh脚本的错误我更改了d
浏览 2
提问于2020-11-21
得票数 0
6
回答
调试损坏的
DAGs
、
我试过这些地点: /var/log/
airflow
/webserver --在执行的时间范围内没有日志,其他日志是二进制的,
使用
strings解码没有提供有用的信息。/var/log/
airflow
/scheduler --有一些日志,但
以
二进制形式存在,试图读取它们,并且看起来大多是sqlalchemy日志--可能是供气流数据库
使用
的。/var/log/
airflow
/
浏览 9
提问于2017-05-12
得票数 29
回答已采纳
1
回答
无法执行气流KubernetesExecutor
、
、
在的项目之后,我正在尝试集成
使用
NFS服务器作为后台存储PV的气流kubernetes执行器。我有一个PV
airflow
-pv,它与NFS服务器链接。气流网络服务器
和
调度器
使用
的是与
airflow
-pvc绑定的PVC
airflow
-pv。服务器
和
调度器部署文件;kind: Service name:
airflow
-webserver-svc namespace: development=
浏览 2
提问于2019-08-01
得票数 2
回答已采纳
2
回答
如何获得在气流中运行的当前进程的所有任务及其状态的列表
、
、
需要帮助来提取所有任务的列表,以及当前状态成功/失败的当前进程运行。我有一个带有python操作符的任务,它在工作流的末尾执行。此任务的职责是返回与状态一起执行的任务的no。
浏览 10
提问于2022-06-22
得票数 0
回答已采纳
5
回答
从不工作的终端
触发
气流DAG
、
我正在尝试
使用
airflow
来定义我想要从命令行手动
触发
的特定工作流。 "DAG_NAME", schedule_interval=None,default_args=args)
airflow
trigger_dag DAG_NAME 什么都不会发生。
浏览 2
提问于2016-05-05
得票数 24
12
回答
Airflow
未在/usr/local/
airflow
/
dags
中加载
dags
Airflow
似乎跳过了我添加到/usr/local/
airflow
/
dags
中的
dags
。当我跑的时候输出如下所示 ---------
浏览 0
提问于2017-08-07
得票数 29
8
回答
如何删除气流中的默认示例
、
load_examples = False设置为
airflow
.cfg。 删除文件夹lib/python2.7/site-packages/
airflow
/example_
dags
。在我删除
dags
文件夹后,这些示例标记的状态被更改为灰色,但项目仍然占据web屏幕。并且在
airflow
.cfg中指定一个新的dag文件夹为
dags
_folder = /mnt/dag/1。
浏览 13
提问于2017-04-14
得票数 94
2
回答
如何获得气流中所有DagRun实例的最大/最小持续时间?
、
、
、
在UI上,甚至在带有
编程
/命令行示例的页面上,我都找不到可以这样做的地方。
浏览 3
提问于2022-06-29
得票数 0
2
回答
AWS Lambda
和
Apache
Airflow
集成
、
我想知道有没有人能解释一下这个问题:Apache实验应用
编程
接口:http://
airflow
_hostname/
api
/experimental
浏览 19
提问于2018-03-06
得票数 9
2
回答
如何在气流上运行DockerOperator?
、
我正在设置一个新的气流服务器
使用
对接-合成和气流图像puckel/对接-气流。BashOperators
和
PythonOperator工作得很好,但是当我尝试
使用
DockerOperator时,我得到了名为“docker”的PythonOperator No模块。下面是我正在
使用
的WebServer的停靠组合 image: puckel/docker-
airflow
:1.10.1 context:
AIRFLOW</
浏览 5
提问于2019-05-11
得票数 2
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
airflow 实战系列:基于 python 的调度和监控工作流的平台
迁移工具 Air2phin 宣布开源,2 步迁移 Airflow 至 Dolphinscheduler
任务流管理工具-Airflow配置和使用
调度工具Airflow
使用 Python 和 Scrapy 半小时爬了10 个在线商店的网页
热门
标签
更多标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
活动推荐
运营活动
广告
关闭
领券