apache airflow是否有规则编辑器，我们可以在其中定义多个规则，如"(x>y) && (z==a)“等。稍后，我们可以将这些规则集成到工作流步骤中，类似于Drools工作台编辑器？
浏览 20提问于2021-06-17得票数 0
回答已采纳
我对Kubernetes很陌生，并试图让apache的气流使用舵机图表来工作。在经历了将近一个星期的挣扎之后，我无处可寻--甚至连apache气流文档中提供的那个也无法工作。当我运行这些命令时：helm repo add apache-airflow https://airflow.apache.org
helminstall airflow apache<
浏览 13提问于2021-12-03得票数 1
回答已采纳
但是，Airflow标志着整个DAG运行失败。 我想做的事情如下:我想测量任务的数量，如果成功的百分比超过某个百分比，则将DAG运行标记为成功。
浏览 21提问于2020-12-05得票数 0
过去几个月，我一直在学习如何使用Apache-Airflow，我想看看是否有人有将CSV文件从S3传输到亚马逊网络服务(AWS) Mysql数据库的经验。或者从我的本地驱动器到MySQL。我设法使用airflow.hooks.S3_hook将所有内容发送到S3存储桶中，以将它们存储在云中，它工作得很好。我使用boto3来做这件事。我是否需要使用python钩子并在其中添加我的凭据，然后编写MySQL函数？任何帮助
浏览 2提问于2019-09-26得票数 1
2回答
我已经运行了docker-airflow，并且通过localhost在浏览器上运行良好。但是，每当我尝试在vscode中打开一个dag文件时，它都会显示导入错误。Docker Container for airflow正在运行。from airflow import DAG
from airflow.operators.bash_operator import BashOperator ?
浏览 21提问于2020-04-05得票数 1
回答已采纳
Airflow模块附带一个主pip包apache-airflow和多个子包，只安装我们需要的(查看文档)
我想测试是否安装了一个子包(例如，获取一个bash命令以了解是否安装了apache-airflow要知道是否安装了apache-airflow，我可以执行pip show apache-airflow，如果已安装，则获取0作为退出代码，否则获取1。如果我执行pip show <
浏览 19提问于2017-07-04得票数 4
回答已采纳
apache-airflow-providers-google 5.0.0 has requirement google-ads>=12.0.0, but you have google-ads 7.0.05.0.0 has requirement google-ads>=12.0.0, but you have google-ads 7.0.0.
apache-airflow-backport-providers-google2021.3.3 has requirement apache-<
浏览 6提问于2021-10-15得票数 0
回答已采纳
2回答
在Apache Airflow UI中，顶部的计时器会自动更新：但为了跟踪特定DAG运行的进度，我必须不断单击刷新按钮：有没有人知道是否有一种方法可以将airflow ui配置为自动更新树视图(如果图表视图也具有相同的功能，那就更好了。)
浏览 1提问于2020-10-16得票数 2
我正在尝试使用docker-compose的apache airflow，使用基本的容器容器apache/airflow:2.0.1。我正在学习本教程https://airflow.apache.org/docs/apache-airflow/stable/start/docker.html# 如何运行简单的查询来从SQL Server在这个阶段，我只想看看这是否<
浏览 13提问于2021-04-12得票数 0
回答已采纳
1.4与composer 2.0。根据气流文档，不应该是这种情况，而是在任务失败后终止DAG的执行。任务是依赖的，因此如果一个任务失败，下一个任务就会失败。我希望，如果任务失败，DAG的执行将被终止。default_args = { 'start_date': datetime.datetime(2021, 12, 28 ,15 ,0 ,0 ), #2021-08-08 10:00:00 UTC-0
'emai
浏览 1提问于2022-01-13得票数 0
我想知道是否可以在这个文件中设置我的连接和变量。我知道我可以使用带有URI参数的AIRFLOW_CONN_...来建立连接。是否可以在AIRFLOW_CONN_...文件中使用docker-compose.yaml和EXPORT VARIABLE？image: ${AIRFLOW_IMAGE_NAME:-apache/airflow:2.1.4}
# build: .: ${_PIP_ADDITIONAL_REQUIREMENTS:- pymssql py
浏览 17提问于2021-09-27得票数 4
回答已采纳
在使用pip install apache-airflow进行全新安装后，任何尝试运行airflow的操作都会以python导入错误结束：File "/Users/\*/env/bin/airflow", line 26, in <module> from airflow.bin.cli import CLIFactory
File"/
浏览 2提问于2020-02-07得票数 18
1回答
在Google cloud中运行Dataflow作业时，如何将Dataflow管道配置为在失败(或成功完成)时发送电子邮件？有没有一个简单的选项，可以在Pipeline程序中配置它，或者其他任何选项？
浏览 0提问于2018-12-19得票数 0
我会提供
另外，下面是我的坞-撰写文件(我注释掉了气流db init，但我是否应该将它与db升级参数保持为真呢？process_fileapache-airflow-airflow-schedulerin raise_
apache-airflow-airflow-scheduler-1
浏览 13提问于2022-02-01得票数 1
回答已采纳
其次，另一种方法是使用apache-airflow-providers-google，但是一旦安装，我就无法在DAG中导入这个模块。
RUN pip install apache-airflow-providers-google==6.3.0
码头修造。image: ${AIRFLOW_IMAGE_NAME:-apache
浏览 9提问于2022-02-14得票数 1
我正在尝试用开源框架来做ETL，我听说过两件事，Apache Beam和Apache Airflow，这两件事最适合整个ETL或ELT，比如Talend、Azure Data Factory等，事实上，
浏览 35提问于2019-07-09得票数 0
1回答
空气流量限制每日触发
、、、
有一种“自然”(我指的是思维参数)的方法来限制触发dag的次数(比方说每24小时)。我不想计划它，但一些用户可以多次触发相同的dag，出于资源和其他原因，我只想要一次。正如我所看到的，"depends_on_past“只依赖于前一次运行，但它可能是一天中的很多次。Thx
浏览 18提问于2021-08-15得票数 0
1回答
我试图使用这个配置文件在kubernetes集群上部署具有流量的气流。我试过：kind: HelmRelease name: airflowspec:releaseName: airflow-dev repository: https://airflow.apache.org
浏览 4提问于2021-12-18得票数 1
2回答
带命令的气流安装失败昨天一切都很好。今天，我看到了以下错误：
Could not find a version that satisfies the requirement apache-beam[gcp]==2.3.0 (from google-cloud-dataflow->apache-airflow[gcp_api]) (from versions: 0.6.0, 2.0.0, 2.1.0, 2.1.1,
浏览 0提问于2018-03-01得票数 5
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
