谁能指导我，如果我做错了什么:目标:想要设置调度器HA。版本:后端db -postgres12.6，Airflow 2.1.1挑战:当调度器在第一台机器上启动时，它按预期工作，我能够触发示例_bash_operator，但当调度器在具有相同后端连接的另一台主机上启动时
浏览 107提问于2021-11-17得票数 0
+psycopg2://airflow:airflow@postgres/airflow <<: *airflow</e
浏览 3提问于2021-10-04得票数 1
回答已采纳
/datawarehouse:/datawarehouse - "8080:8080" scheduler:container_name: analytics-scheduler context: ./datawarehouse:/datawarehouse - "8793:8793"
command: sched
浏览 69提问于2021-09-08得票数 0
回答已采纳
]; thenfi
airflow scheduler我有一个.env文件，我用定义我的气流参数来构建容器：
AIRFLOW_HOME=/home/backend/<em
浏览 34提问于2020-07-30得票数 0
回答已采纳
我已经在现有的Airflow 2.0.0安装的基础上安装了Apache Spark provider，安装方法如下： pip install apache-airflow-providers-apache-spark' from 'apache-airflow-providers-apache-spark' package: name 'client' is not defined
[2021-01-19 18:49' from 'apache-airflow</
浏览 16提问于2021-01-20得票数 3
4回答
我正在寻找资源来更改气流服务的日志路径，如Webserver和Scheduler。我不时地耗尽空间，所以我想把日志移动到一个更大的装载空间。airflow-scheduler.log
浏览 0提问于2018-11-29得票数 1
我知道气流2.0现在支持为HA并发运行多个调度器。我可以在相同的机器 (VM)上运行多个调度程序吗？如果我想要两个调度程序，只需要运行两次airflow scheduler就可以做到这一点，而不需要配置任何其他内容吗？
浏览 1提问于2021-07-26得票数 1
2回答
我使用以下命令在kind上安装气流：export NAMESPACE=airflow
--set images.airflow.repository=my-dags \ --values e
浏览 4提问于2021-12-07得票数 1
+psycopg2airflow-scheduler_1 | DB_PORT=5432airflow-scheduler_1 |
airflow-scheduler_1 | airflow command error: argument GROUP_OR_COMMA
浏览 0提问于2021-10-28得票数 0
我尝试将airflow scheduler作为守护进程运行，但该进程不会持续很长时间。我已经在airflow.cfg文件中配置了"LocalExecutor“，并运行以下命令来启动调度器(我正在使用谷歌计算引擎并通过PuTTY访问服务器)。airflow scheduler --daemon --num_runs=5 --log-file=/root/airflow/logs/scheduler.log
当我运行此命令时
浏览 6提问于2016-09-08得票数 10
当我跑的时候我看到这些条目：
user1 2907 6.0 1.0 329788 62996 ?Sl 17:37 1:26 /users/user1/anaconda2/bin/python /users/user1/anaconda2/bin/airflow scheduler -DSl 17:37
浏览 5提问于2017-06-23得票数 11
││ scheduler File "/home/airflow/.local/lib/python3.7
浏览 5提问于2022-05-25得票数 1
回答已采纳
2回答
气流用户问题
、、、
我们已经在虚拟环境中使用sudo根安装了服务帐户上的气流，比如“ABC”，但是我们面临的问题很少。
然后尝试sudo -u ABC python script。由于sudo的使用，没有选择环境变量。在没有环境变量的情况下解决了问题，并且在没有问题的开发环境中运行良好。但是当
浏览 0提问于2019-08-08得票数 1
2回答
根据文档，我预期以下两个命令中的一个会在守护进程模式下引发调度程序：或什么都没发生。- Started a process (PID: 21822) to generate tasks for /home/ubuntu/airflow</
浏览 2提问于2017-09-28得票数 15
回答已采纳
", line 297, in _bootstrapapache-airflow-airflow-schedulerprocess_fileapache-airflow-<em
浏览 13提问于2022-02-01得票数 1
回答已采纳
您好，我正在使用Airflow，并将我的airflow项目放在EC2中。然而，当我的mac进入睡眠或退出ssh时，如何保持气流调度器运行？
浏览 26提问于2017-07-18得票数 3
1回答
我运行airflow scheduler命令，它正在工作。但是，我无法设置气流调度器服务。Description=Airflow scheduler daemonGroup=ubuntuExecStart=/bin/airflow scheduler -
浏览 0提问于2017-05-25得票数 2
systemctl status airflow-scheduler Loaded:/airflow-scheduler.service
├─37409 /usr/bin/python3.6 /bin/airflow schedul
浏览 0提问于2019-03-09得票数 3
我想隐藏UI上所有暂停的DAG，但是airflow.cfg上的配置似乎不起作用。到目前为止，我为使其发挥作用所采取的步骤如下：
删除airflow.cfg和do airflow initdb (孤注一掷)
浏览 2提问于2018-11-30得票数 0
可以创建)： airflow-scheduler_1 | Traceback (most recent call last):airflow-scheduler_1 | sys.exit(
浏览 40提问于2021-09-10得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
腾讯会议
云直播
对象存储活动推荐
腾讯云开发者
