腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
为什么
airflow
尝试
在
ubuntu
服务器
上
使用
sudo
运行
任务
,
然后
失败
?
、
、
、
我最近在
Ubuntu
服务器
上部署了
Airflow
,
使用
官方的
airflow
docker镜像和docker-compose文件作为我的基础。一开始,我本地的windows10机器和
服务器
上
的一切都
运行
得很好。但几天后,我的所有dags/
任务
都会在
服务器
上
失败
,并在日志中显示以下错误消息: [2021-05-05 09:24:51,274] {taskinstanc
浏览 18
提问于2021-05-05
得票数 0
回答已采纳
2
回答
将气流调度程序作为守护进程
运行
的问题
、
、
、
、
我有一个EC2实例,它
使用
LocalExecutor
运行
气流1.8.0。我
使用
的是带有
Ubuntu
16.04.3的vanilla m4.xlarge EC2实例:
sudo
systemctl enable
airflow
-scheduler
sudo
systemctl start
airflow
-scheduler 什么都没发生。虽然在这个实例
上
运行
的DAG要复杂得多,但
浏览 2
提问于2017-09-28
得票数 15
回答已采纳
2
回答
试图
使用
systemd
在
ubuntu
服务器
上
运行
apache气流
、
、
我试图
使用
在一个
ubuntu
服务器
上
运行
。我遵循了快速启动指南和气流文档中的教程,并成功地安装了气流,并
使用
以下命令成功地
运行
了它:
在
安装了systemd之后,
在
使用
进行了大量的
尝试
和错误之后
sudo
systemctl restart
airflow
运行
sudo<
浏览 2
提问于2018-09-12
得票数 16
1
回答
系统重新启动后重新设置
Airflow
数据库
、
、
我已经
在
一个普通的EC2
Ubuntu
18.04免费实例
上
设置了一个
Airflow
实例,没有任何进一步的配置(顺序执行器和SQLLiteDB)。
在
我重新启动系统之前,一切都正常工作。一旦系统重新启动,我就无法再重新启动web
服务器
。当我导航到http://myec2instanceip:8080时,
服务器
没有出现。
使用
sudo
ps -ax | grep
airflow
重新启动
服务器</e
浏览 28
提问于2019-06-14
得票数 1
回答已采纳
5
回答
Airflow
任务
停留在“已排队”状态,永远不会
运行
、
、
我
使用
的是
Airflow
v1.8.1,并在kubernetes & Docker
上
运行
所有组件(worker、web、flower、scheduler)。我
在
Redis中
使用
Celery Executor,我的
任务
如下: ├ -> (do_work_for_product2)并按如下方式设置并发相关配置:dag_concurrency
浏览 3
提问于2017-08-24
得票数 25
1
回答
气流when
服务器
- OAuth身份验证
在
作为系统服务
运行
时不起作用
、
、
、
我们
在
Ubuntu
22.04
上
运行
气流2.3.3。
Airflow
的and
服务器
使用
针对Azure的OAuth身份验证(和授权)。现在,我们希望构建一个systemd服务,以便在
服务器
启动时自动
运行
气流网络
服务器
。我不知道从命令行
运行
vs.
服务器
与将其作为系统服务
运行
之间的区别。如何确保systemd
使用
与从命令行
运行
时完全相同
浏览 9
提问于2022-09-30
得票数 -1
2
回答
气流启动脚本
在
启动/
运行
状态后立即进入停止/等待状态
、
、
、
我正试图从气流的官方回购中
运行
这个新启动的脚本:stop on (deconfiguring-networking or runlevel [016]) respawn limit 5 30 setgid
airflow
当我
运行
它时,这是输出: $
sudo
service
浏览 6
提问于2016-06-27
得票数 2
回答已采纳
1
回答
气流-达格不跑
、
、
python: 27我没有创建任何我自己的工具,但是我
尝试
运行
这些例子来学习它是如何工作的。我已经修改了配置以
使用
并已完成 export
AIRFLOW
_HOME=`pwd`/
airflow<
浏览 3
提问于2017-11-20
得票数 3
回答已采纳
1
回答
气流不创建日志文件或在UI
上
显示
任务
实例中的日志
、
、
我得到了以下气流问题:
airflow
.exceptions.AirflowException: Celery command failed on host 如何解决这个问题
浏览 5
提问于2022-07-08
得票数 0
3
回答
使用
命令行导入json文件中的气流变量
、
、
{ "var1": "apple", "settings": { "more_settings": { "var2": "pear", "var3": 123 } } }但是,当我
运行
gcloud命令时,当我
在
Airflow
的UI中导入Missing variables file.时,就会得到错误properties.json,它是没有问题地导入的。
浏览 0
提问于2019-09-23
得票数 9
回答已采纳
1
回答
为什么
Airflow
Scheduler只能作为非守护进程工作,而作为守护进程
失败
?
、
、
、
我已经
在
Ubuntu
服务器
上
设置了
airflow
。我将the
服务器
作为守护进程正常启动。我可以
使用
以下命令启动调度程序它工作得很好,达格人跑起来了。
然后
停止它并删除$
AIRFLOW
_HOME中的所有
airflow
-scheduler文件(
airflow
-scheduler.err、
airflow
-scheduler.log、<
浏览 45
提问于2020-02-14
得票数 1
回答已采纳
1
回答
在
另一台具有
Airflow
的计算机上安排
任务
我
在
Ubuntu
远程
服务器
上
用Postgres数据库成功地设置了
Airflow
,看起来很棒。因为我现在只是测试
Airflow
,所以它安装在一个相当小和低功率的
服务器
上
。有没有办法安排
任务
在
我
浏览 12
提问于2017-03-07
得票数 6
回答已采纳
4
回答
如何将~/bin添加到systemd服务的路径中?
我有一个systemd服务,它调用一个PHP脚本,
在
引导时创建一个tmux会话。我需要的是这个systemd在用户的$HOME中
使用
tmux二进制文件。我已经
在
systemd服务文件中设置了用户和组变量,但是它似乎调用了全局安装的二进制文件。 是否可以显式设置应该为该服务调用调用的二进制文件?
浏览 0
提问于2018-03-13
得票数 27
回答已采纳
1
回答
在
conda环境中
运行
气流并
使用
systemd无法启动
、
、
、
、
我想通过conda安装气流,并
使用
systemd控制
Ubuntu
上
的气流。我已经通过以下步骤成功地将气流安装到conda环境中,但是我还不能正确地配置systemd来处理气流。下面是从命令行安装和
运行
气流的步骤:$ conda activate
airflow
$ export
sudo
systemctl enable
airflow</
浏览 3
提问于2019-08-20
得票数 2
回答已采纳
5
回答
已启动气流but
服务器
,但用户界面未在浏览器中显示
、
我正在
尝试
使用
airflow
。
然后
我
运行
airflow
webserver -p 8080,它看起来正在
运行
。当我去时,我看不到任何用户界面。如果我再次
尝试
运行
我得到的
airflow
浏览 0
提问于2019-04-17
得票数 14
回答已采纳
6
回答
如何在Windows
上
运行
气流
、
、
、
、
运行
气流的通常说明不适用于Windows环境:# but you can lay foundationsomewhere else if you preferexport
AIRFLOW
_HOME=~/
airflow
# initializ
浏览 13
提问于2015-09-03
得票数 48
回答已采纳
5
回答
从不工作的终端触发气流DAG
、
我正在
尝试
使用
airflow
来定义我想要从命令行手动触发的特定工作流。 "DAG_NAME", schedule_interval=None,default_args=args)
airflow
trigger_dag DAG_NAME
浏览 2
提问于2016-05-05
得票数 24
1
回答
“run_as_user”不工作的气流模拟
、
我正在按照这里的指示- 我启动了气流网络
服务器
、调度器和工作人员,作为
运行
在“气流”用户下的
sudo
。此用户设置
在
sudoers文件中,不允许密码登录。我创建了一个BashOperator和一个PythonOperator,其中的run_as_user参数设置为
服务器
上
名为'linus‘的现有用户。当我以“气流”登录时,我可以通过
运行
sudo
-u linus来切换用户,而不需要提示我输入密码。python_callable='p
浏览 0
提问于2018-03-30
得票数 2
回答已采纳
4
回答
如果任一
任务
失败
,气流回填将停止
、
我正在
使用
airflow
cli的backfill命令手动
运行
一些回填作业。dag间隔是每小时一次,它有大约40个
任务
。我需要它在没有监督的情况下
运行
。然而,我注意到,即使一个
任务
在
回填间隔中的一个
运行
中
失败
,整个回填作业也会停止,并出现以下异常,我必须再次手动重新启动它。,因此我不介意一个或两个
任务
失败
。我
在
中找不到任何允许我指定此行为的选项。 有没有办法实现我想要的东西?
浏览 5
提问于2018-09-20
得票数 5
4
回答
气流:找不到dag_id
我
在
不同的AWS机器
上
运行
一个气流
服务器
和工作人员。-本地/home/
ubuntu
/
airflow
/dags/
airflow
_tutorial.py‘-sd 问题在于,由于正确的路径是(/home/
ubuntu
/
airflow
/dags/
airflow
_tutorial.py
在
服务器</
浏览 4
提问于2017-04-05
得票数 17
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
调度工具Airflow
如何在Ubuntu Server 18.04上安装GNOME桌面
一个命令让Ubuntu升级变得更简单
如何借助Ubuntu Livepatch避免服务器重启?
恒讯科技分析:如何解决云服务器上MySQL数据库的常见问题?
热门
标签
更多标签
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM
活动推荐
运营活动
广告
关闭
领券