我正在尝试使用以下命令重新启动airflow scheduler我正在使用docker。我进入用于airflow的docker映像，并打开用于我的airflow映像的CLI。这就是我使用这个命令的地方。from airflow.configuration import conf
File "/usr/local/lib/python3.6/site-p
浏览 61提问于2021-03-04得票数 1
1回答
我正在尝试第一次尝试气流，并尝试将其连接到本地的SQLite数据库。但我似乎不知道该怎么做。我在上阅读过，将executor设置为LocalExecutor，将sql_alchemy_conn设置为sqlite:////home/myName/Programs/sqlite3/DatabaseName.db>
浏览 0提问于2018-12-18得票数 3
回答已采纳
我一直在介绍Apache气流，到目前为止一切都进行得很顺利，但是我一直在使用默认的SQLite数据库，现在我需要更改为PostgreSQL数据库。我已经将sql_alchemy_conn执行器更改为LocalExecutor，并将字符串设置为postgresql+psycopg2://airflow:airflow@postgres:5432/airflow现在，当我运行airflow initdb时，我会收到错误
<em
浏览 1提问于2019-11-13得票数 0
- POSTGRES_PASSWORD=airflow ports: - AIRFLOW__CORE__LOAD_EXAMPLES=False - AIRFLOW_HO
浏览 13提问于2022-08-12得票数 0
回答已采纳
我尝试配置Airbnb AirFlow来使用CeleryExecutor，如下所示：# SequentialExecutor, LocalExecutor, CeleryExecutor但我得到以下错误：
airflow.configuration.AirflowConfigExcep
浏览 0提问于2016-04-24得票数 15
2回答
我的主进程应该根据以下概述运行：通过使用以下行，我成功地在我的主dag中实现了这个结构：default_args = { 'depends_on_past': False,
浏览 4提问于2018-10-10得票数 34
回答已采纳
我将puckel/airflow图像与localexecutor一起使用。我正在尝试运行一个回填作业 docker exec -it 44d0222c71c1 airflow backfill transfer_pipeline -s 2020-05-30 -e 2020-09-01 从我收到的日志看，它似乎正在使用SequentialExecutor，无法访问postgre数据库 {{cli_action_loggers.
浏览 19提问于2020-09-16得票数 0
回答已采纳
当有任务运行时，Airflow将弹出一个通知，说明调度程序似乎没有运行，并一直显示到任务完成：我的任务有点重，可能要运行几个小时。
浏览 87提问于2019-08-27得票数 39
我需要并行运行dags，但不需要大量的扩展，这样LocalExecutor就可以很好地完成这项工作。BY <pass>;然后在airflow.cfg文件中修改以下参数：
executor = LocalExecutorsql_alchemy_conn = mysql+mysqlconnector://<user>:<pass>@localhost:3306&#
浏览 13提问于2021-10-30得票数 2
回答已采纳
我airflow.cfg的一部分# The executor class that airflow should use.Choices includeexecutor = CeleryExecutor
# The amount of parallelism as a setting to the executor.When nonzero, airfl
浏览 1提问于2018-09-07得票数 2
Airflow版本: 1.10.9摘要设置
当作业运行时，有时我们会得到以下错误。我在网上搜索过，很多人在celeryExecutor中遇到了这个问题，但我们使用的是LocalExecutor(Docker setup)。如何解决此问题？*** Log file does not exist: /home/ubuntu/airflow/airflow/logs/es_update_rele
浏览 0提问于2020-05-15得票数 2
2回答
我已经在本地安装了airflow，我正在更改执行器以运行并行任务，我更改了 1-从数据库到Postgres 13.3 2-在配置文件sql_alchemy_conn = postgresql+psycopg2://postgres:postgres@localhost/postgres中 3-执行器= LocalExecutor 我已使用airflow DB check --> INFO - Connectionairflow数据库初始化-->初始化完成 我收到的
浏览 196提问于2021-06-28得票数 0
回答已采纳
在使用Airflow 2.1.2运行标准气流示例时，DAG需要很长时间才能完成。每次运行DAG时，都会出现此问题。从airflow GUI运行时出现问题。当从airflow命令行作为测试运行时，这不是问题。
浏览 84提问于2021-07-29得票数 0
我在airflow中创建了(许多)DAG...它起作用了。然而，我想以某种方式将它打包，这样我就可以在没有安装airflow的情况下运行一次DAG；即拥有它自己，这样我就不需要所有的web服务器，数据库等。我主要使用触发器DAG来实例化新的dag运行，我注意到运行气流的开销似乎相当高(工作人员负载很高，基本上什么都不做，有时可能需要10秒才能将相关任务排队等)。
我不太担心所有的日志记录等等。
浏览 8提问于2018-01-23得票数 3
我在localhost中运行Airflow 2.1.2，使用： docker-compose version: '3' webserver:AIRFLOW__CORE__SQL_ALCHEMY_CONN= sqlite:////opt/airflow/airflow.db
AIRFLOW__CORE__EXECUTOR=Sequen
浏览 69提问于2021-09-08得票数 0
回答已采纳
4回答
下面是我的配置文件：
sql_alchemy_conn = postgresql+psycopg2://xxxx.amazonaws.com:5432&#x
浏览 13提问于2017-04-20得票数 10
2回答
我正在使用apache airflow来运行我的dags。=airflow ports: imageairflow-webserver.pid ]"] timeout: 30s我在使用PythonVi
浏览 0提问于2020-07-27得票数 2
我正在尝试将包括Kerberos身份验证在内的Airflow安装从localexecutor升级到celeryexecutor。目前，我们仅从一台服务器运行airflow安装。当localexecutor成功时，由于kerberos身份验证错误，使用celeryexecutor会导致完全相同的sqoop作业失败： Client cannot authenticate via:1377ms.' kerberos设置： [kerberos]
ccache = /tmp&#
浏览 82提问于2020-11-06得票数 0
我是新接触Airflow的，我正在尝试使用airflow来构建数据管道，但它总是遇到一些例外。我的airflow.cfg是这样的：sql_alchemy_conn = postgresql+psycopg2://airflow:airflow@= postgresql+psycopg2://airflow:airflow@localhost&#
浏览 30提问于2019-11-20得票数 1
Airflow version 1.8Python version 3.6当我使用LocalExecutor和Mysql作为元数据数据库配置Airflow时，我收到没有名为'MySQLdb‘的模块错误。由于版本问题，我无法安装MySQLdb包。谢谢Kalanidhi
浏览 2提问于2018-11-09得票数 0
云服务器
ICP备案
腾讯会议
云直播
对象存储
腾讯云开发者
