腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
如何
使用
airflow
rest
api
停止
运行
dag
我有一个正在
运行
的
dag
,我可以
使用
REST
API
停止
它吗?有一种方法可以删除正在
运行
的
dag
:https://
airflow
.apache.org/docs/apache-
airflow
/stable/stable-
rest
-
api
-ref.html#operation/delete_
dag
浏览 145
提问于2021-10-09
得票数 1
回答已采纳
1
回答
消息到达AWS SQS队列后触发
Airflow
DAG
、
、
是否可以在消息到达SQS队列时安排
DAG
运行
?我还需要
dag
来处理队列中的消息。据我所知,这可以通过
使用
SQSSensor来完成,但我找不到任何示例,我对
如何
前进感到困惑。
浏览 24
提问于2021-08-02
得票数 0
1
回答
如果之前的任务执行时间较长,则会跳过气流计划
、
我在我的气流
DAG
中有两个任务。一个触发
API
调用( Http操作符),另一个
使用
另一个
api
( Http传感器)不断检查其状态。此
DAG
计划每小时& 10分钟
运行
一次。我正在
使用
下面的脚本
运行
airflow
服务器和调度程序。start_server.shexport
AIRFLOW
_GP
浏览 11
提问于2019-08-09
得票数 1
回答已采纳
1
回答
用于
使用
REST
API
调用删除
Airflow
UI中的
airflow
Dag
的CSRF令牌
、
、
、
其目的是通过
rest
api
调用从UI中删除
airflow
dag
。我尝试了调用.../delete?
dag
_id=<
dag
_id>,这个
rest
调用失败了,报告缺少CSRF令牌。
如何
从
airflow
服务器获取CSRF令牌?或者有没有更好的方法从
airflow
UI中自动删除
dag
?(不是从
airflow
UI手动按下删除按钮)
浏览 3
提问于2020-06-11
得票数 0
2
回答
如何
获取
dag
状态,如正在
运行
、成功或失败
、
我想知道
dag
的状态是
运行
、失败还是成功。我正在通过CL参数
airflow
trigger触发
dag
,在作业执行之后,我想知道
运行
的状态。我找不到任何方法。我尝试了
airflow
dag
_state,但它没有提供任何帮助。如果一天中有不止一次
运行
,通过命令行参数或python代码获取最近一次
运行
的状态,我应该怎么做?
浏览 35
提问于2019-11-07
得票数 3
回答已采纳
1
回答
是否有可能从气流1中触发气流2进程,反之亦然?
、
、
我们正在新旧气流之间进行迁移,我们试图实现从
Airflow
1到
Airflow
2的触发器(反之亦然),这有可能吗?
浏览 3
提问于2022-02-07
得票数 0
回答已采纳
8
回答
气流以编程方式解除暂停?
、
、
我有一个进程,我们将部署到多个不同的气流实例,在我们的
airflow
.cfg中,我们有dags_are_paused_at_creation = True,但是对于这个特定的进程,我们希望通过单击UI来打开它
浏览 8
提问于2017-06-05
得票数 16
回答已采纳
1
回答
Apache
Airflow
-
rest
API
身份验证
、
、
我正在尝试
使用
AirFlow
rest
API
触发我的
dag
。但是,不能理解
如何
进行身份验证。 下面的URL在我的浏览器中
运行
良好。http://localhost:8181/
api
/experimental/dags/demo/
dag
_runs 但是,下面的代码会给出身份验证错误。import requestsfrom pprint im
浏览 24
提问于2020-04-21
得票数 2
4
回答
如何
手动触发气流
dag
?
、
基本上,我已经为任务准备好了脚本和
dag
,但该任务不会定期
运行
。相反,它需要在随机时间激活。(外部方会告诉我们是时候了,我们将
运行
它。在接下来的几个月里,这种情况可能会发生很多次。)有没有手动触发
dag
的方法?也欢迎任何其他方向/建议。谢谢。
浏览 3
提问于2019-12-13
得票数 6
2
回答
如何
获得在气流中
运行
的当前进程的所有任务及其状态的列表
、
、
需要帮助来提取所有任务的列表,以及当前状态成功/失败的当前进程
运行
。我有一个带有python操作符的任务,它在工作流的末尾执行。此任务的职责是返回与状态一起执行的任务的no。
浏览 10
提问于2022-06-22
得票数 0
回答已采纳
2
回答
如何
触发从Python脚本中
运行
的气流
DAG
?
、
、
、
使用
apache气流,我创建了一些DAGS,其中有些不按计划
运行
。编辑??python脚本将从一个与我所有的DAGS所在的项目不同的项目中
运行
。
浏览 5
提问于2020-02-04
得票数 9
回答已采纳
1
回答
从Apache
Airflow
Rest
API
返回实际连接的
DAG
数据,以便用户可以构建自己的UI来可视化
DAG
、
、
、
我正在
使用
Apache
Airflow
REST
API
。 支持许多基本命令。例如,我可以通过
运行
以下命令返回特定
DAG
的信息: https://8080/my_url/
api
/experimental/dags/example_pig_operator/
dag
_runs ...which返回: [{ "
dag
_id": &qu
浏览 61
提问于2021-06-19
得票数 0
1
回答
如何
以表格形式导出特定所有者的最新气流
dag
和任务状态
、
Airflow
提供
rest
API
功能来提取
dag
/任务状态。https://
airflow
.apache.org/docs/apache-
airflow
/stable/stable-
rest
-
api
-ref.html#section/Trying-the-
API
但是想知道是否有一种方法可以仅获得所有
dag
w.r.t
dag</
浏览 27
提问于2021-08-26
得票数 0
1
回答
通过HTTP的Apache
Airflow
、
、
我遇到了一个问题,我可以从
airflow
的
rest
api
命令(https://
airflow
.apache.org/
api
.html)成功触发
dag
;但是,
dag
实例不能
运行
。我正在调用-> POST /
api
/experimental/dags/
dag
_id/
dag
_runs,其中
dag
_id
浏览 17
提问于2019-10-03
得票数 0
回答已采纳
1
回答
如何
在Apache
Airflow
中的
DAG
运行
中指定
运行
id
、
从When服务器触发
DAG
并转到图形视图时,
运行
id如下所示: ? 我可以在命令行中
使用
'
airflow
trigger_
dag
‘并指定'run_id’来指定此名称,但我不知道
如何
在通过when服务器触发
DAG
时指定此ID? 有没有人找到了这样做的方法?
浏览 84
提问于2021-04-26
得票数 2
2
回答
气流:是否有可能将DagRun标记为失败/杀死它?
、
我想以编程方式杀死一个
dag
运行
。我
如何
通过Python或其他方式来实现呢?
浏览 13
提问于2022-07-15
得票数 0
1
回答
AIRFLOW
-
使用
API
以编程方式列出、触发和
停止
DAGS
、
、
我还想通过python触发列表中的任何
DAG
或
停止
其间的
DAG
有没有什么Python
API
可以做到这一点?
浏览 42
提问于2021-05-05
得票数 1
7
回答
基于Webrequest的气流作业
运行
、
后端然后调度作业
使用
气流立即
运行
。 谢谢。
浏览 6
提问于2017-02-22
得票数 32
回答已采纳
1
回答
在芹菜工人身上
运行
的气流传感器会发生什么?
用例:
DAG
定义了一个
Rest
任务(
使用
RestOperator),它访问应用程序
API
并开始执行一个流程/任务,该流程/任务执行一些业务功能。它的执行状态由气流传感器监视,通过
API
调用轮询任务执行完成状态。如果芹菜节点发生故障,将
如何
处理
运行
在该节点上的传感器。如果传感器与工作人员一起死亡,
如何
将传感器执行传播到另一个节点(以避免functionality).丢失)。
airflow
.provider
浏览 5
提问于2020-07-08
得票数 0
1
回答
在python中执行定义为
DAG
的任务的简单方法?
、
、
、
、
我正在以一种复杂的方式
运行
一系列相互依赖的任务。我想将这些依赖关系描述为
DAG
(有向无环图),并在需要时执行该图。我一直在关注
airflow
,并写了一个虚拟脚本: from datetime import datetime from
airflow
.operators.python="3", python_callable=cloud_runner) first_task >> [second_
浏览 64
提问于2021-10-16
得票数 0
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
迁移工具 Air2phin 宣布开源,2 步迁移 Airflow 至 Dolphinscheduler
没看过这篇文章,别说你会用Airflow
大规模运行Apache Airflow的经验和教训
数据作业自动化调度 AirFlow
调度工具Airflow
热门
标签
更多标签
云服务器
ICP备案
腾讯会议
云直播
对象存储
活动推荐
运营活动
广告
关闭
领券