腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
Airflow
无法
启动
,
因为
来自
未来
包
的
ValueError
python
、
python-3.x
、
airflow
、
valueerror
以前,我可以从我特定
的
anaconda环境中运行
airflow
webserver和
airflow
scheduler,但是现在,当我运行这些命令时,我得到了一个
ValueError
,两个服务器都没有
启动
错误如下: (
airflow
_test) guy-mbp:
airflow
guy$
airflow
webserver File", line 29, in <m
浏览 29
提问于2019-11-26
得票数 0
回答已采纳
1
回答
损坏
的
DAG:[/usr/local/
airflow
/dags/test.py]没有名为“boto3 3”
的
模块。如何将管道安装到气流容器中?
docker
、
docker-compose
、
dockerfile
、
airflow
-requirements.txtBroken DAG: [/usr/local/
airflow
/我试图在我
的
dockerfile中添加这样
的
东西 FROM puckel/docker-
a
浏览 5
提问于2020-07-09
得票数 0
回答已采纳
1
回答
Python2.7异常不处理python3兼容代码中
的
unicode ('<exception str() failed>')
python-2.7
、
python-3.x
、
python-unicode
我想要一个python2.7/3+兼容
的
代码。我很难正确地处理使用unicode中
的
消息引发
ValueError
的
问题。我发现“异常str()失败”
的
结果很少。"key"] msg = "Message" logging.warn(msg)在python3中,这是按预期
浏览 0
提问于2017-09-06
得票数 4
回答已采纳
1
回答
Airflow
API -可通过API获得DAG运行
的
输出
python
、
python-3.x
、
airflow
、
python-jsons
我正在通过下面的API触发DAG来执行python脚本来运行命令。 curl -X POST -H "Cache-Control: no-cache" -H "Content-Type: application/json" http://localhost:8080/api/experimental/dags/DAG-3/dag_runs -d '{"conf":"{\"hostname\":\"<servername>\",\"username\":\"tes
浏览 65
提问于2020-07-18
得票数 0
2
回答
Joblib和
Airflow
中
的
其他并行任务
python
、
parallel-processing
、
multiprocessing
、
airflow
、
joblib
当
Airflow
作业
启动
时,我看到以下警告追根溯源,我在LokyBackend类( MultiprocessingBackend类中也有类似的逻辑)
的
joblib
包
中看到以下函数触发。我想知道这是不是某种版本问题(使用
Airflow
2.X和Joblib 1.X),或者
Airflow
中是否有可以修复这个
浏览 8
提问于2021-07-09
得票数 9
1
回答
如何修复在运行docker-组合时出现
的
“拒绝权限”错误
docker
、
docker-compose
、
airflow
、
airflow-scheduler
我正在使用码头运行
Airflow
2.0,当我运行sudo docker-compose up --build时我得到了一个错误 错误: apache_
airflow
_scheduler_1
无法
启动
服务调度程序/script/
airflow
-entrypoint.sh”:权限拒绝:未知错误:对于webserver
无法
启动
服务webserver: apache_
airflow
_scheduler_1运行时创建失败/scrip
浏览 6
提问于2021-09-11
得票数 2
1
回答
Airflow
web服务器在没有Gunicorn
的
情况下
启动
,并且
无法
访问
webserver
、
gunicorn
、
airflow
我使用
的
是
Airflow
1.9,两个多月来一直运行良好,但不知何故,现在我
无法
在Gunicorn上
启动
airflow
webserver。nohup
airflow
webserver $* > webserver_new.logs &此外,当web
浏览 0
提问于2018-02-22
得票数 1
3
回答
气流包装Dag (Zip)不被识别
airflow
我正在尝试将我
的
存储库与我
的
Dag打包在一个Zip文件中,就像它声明为一样。因此,我遵循了文档中
的
惯例,即将dag保存在zip
的
根目录中,子目录通过气流将其视为
包
。我
的
zip文件有以下内容:Archive: /home/arjunc/Tutorials/
airflow
,如下所示: from d
浏览 2
提问于2018-03-29
得票数 1
4
回答
即使将气流从配置中移除,也会继续显示示例达格。
airflow
、
apache-airflow
系统通知dag文件夹中不存在dag,但它们保留在UI中,
因为
调度程序已在元数据数据库中将其标记为活动。我知道从那里删除这些行
的
一种方法是直接删除数据库中
的
这些行,但是当然,这不是ideal.How,应该继续从UI中删除这些标记吗?
浏览 1
提问于2017-06-28
得票数 13
回答已采纳
2
回答
将气流调度程序作为守护进程运行
的
问题
python
、
amazon-ec2
、
ubuntu-16.04
、
airflow
、
apache-airflow
根据文档,我预期以下两个命令中
的
一个会在守护进程模式下引发调度程序:或这很奇怪,
因为
根据,--daemon=True应该是
airflow
我使用
的
是带有Ubuntu16.04.3<
浏览 2
提问于2017-09-28
得票数 15
回答已采纳
5
回答
破碎DAG:(.)没有名为docker
的
模块
docker
、
airflow
、
directed-acyclic-graphs
、
google-cloud-composer
下面的脚本似乎遵循了我可以找到
的
示例:from
airflow
import DAGfrom
airflow
.operators.docker_operatortask_id = 'hfan', )Broken DAG: [/home/<e
浏览 7
提问于2018-05-09
得票数 9
回答已采纳
2
回答
Airflow
服务器缺少git
airflow
我安装了一个puckel
airflow
服务器和celery executor,一切都很好,但是今天我意识到docker镜像没有git。我想知道是否有人知道这个docker没有git,也没有办法安装这些软件
包
,
因为
在docker中运行命令
的
用户是
airflow
,具有有限
的
权限
无法
运行apt-get...除非我明确说明,否则docker会运行https://github.com/puckel/docker-
airflow</
浏览 23
提问于2020-06-08
得票数 0
5
回答
如何在Composer中重新
启动
webserver
google-cloud-platform
、
airflow
、
google-cloud-composer
我们最近遇到了一个已知
的
气流问题: 谢谢!
浏览 0
提问于2018-11-12
得票数 8
2
回答
如何升级到气流2.0?
airflow
现在,气流2.0是,我们很高兴尝试一些新
的
功能。 我
的
现有代码会起作用吗?还是会要求我更改我
的
DAG?
浏览 15
提问于2020-12-17
得票数 7
1
回答
与Kubernetes - Fernet键
的
气流GCP连接问题必须是32 url安全safe 64编码字节。
python
、
kubernetes
、
airflow
、
airflow-scheduler
我目前正在运行在谷歌云GCP
的
Kubernetes上
的
气流。我
的
项目是以为基础
的
。我能够
启动
UI,但是当我试图为google云创建一个连接并提交连接时,我会得到以下错误。
ValueError
: Fernet键必须是32 url安全
的
base64 64编码字节。docs推荐
的
第一个问题是确保安装了密码学,我会这样做。我安装了两种类型,一种随风而来,另一种
来自
PyPi。ID
的
典型方法重新
启动
服务器,<e
浏览 0
提问于2018-09-22
得票数 5
3
回答
Airflow
systemd计划程序不工作
airflow
、
apache-airflow
我让not服务器正常工作,并且我
的
airflow
-scheduler.service文件
启动
了调度器,它找到了我
的
dags等。但是,任务没有运行:ERROR - failed to execute task Command 'exec bash -c run'PATH=/opt/anaconda/anacond
浏览 3
提问于2017-10-31
得票数 9
3
回答
气流:码头-组成:“您正在运行pip作为根请使用用户运行pip”
docker-compose
、
airflow
、
airflow-2.x
2.3.0版撰写:“您正在运行pip作为根,请使用用户运行pip”我用2.2.4可以跑得很好,但用2.3.0就不行了echo -e "
AIRFLOW
_UID=$(id -u)" > .env码头客-撰写卷曲-LfO '‘
浏览 8
提问于2022-05-03
得票数 1
回答已采纳
2
回答
成功安装python依赖项后,MWAA
的
Web中没有添加连接类型
airflow
、
amazon
、
mwaa
但是这3个数据库
的
连接并没有添加到Web
的
下拉列表中。有什么想法吗?我已经检查了Cloudwatch上
的
日志,以了解调度程序
的
需求安装,它说所有安装都成功了,如下所示: Successfully installed apache-
airflow
-providers-microsoft-mssql-1.1.0 apache-
airflow
-providers-mysql-1.1.0 apache-
airflow
-providers-oracle-1.1.0 cx-
浏览 2
提问于2021-06-22
得票数 1
1
回答
Airflow
webserver systemd单元出现故障,但没有说明原因
airflow
、
systemd
、
systemctl
这是
airflow
for服务器
的
systemd单元文件:Description=
Airflow
webserver daemon=multi-user.target$ /home/ubuntu/.local/bin/
airflow
webserver 从命令行可以很好地
启动
the服务器。但是,当我使用以下命令检查systemd进程<
浏览 9
提问于2021-02-17
得票数 1
2
回答
在WSL上安装和运行气流
windows
、
ubuntu
、
airflow
、
windows-subsystem-for-linux
我按照中
的
流程在WSL (Windows 10)下在Ubuntu中安装了气流。但是,在运行
airflow
db init时,我会得到以下错误:(
airflow
_env) sultani@Khalid:~/c/users/administrator/airflowhome$
airflow
浏览 6
提问于2022-06-08
得票数 1
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
大规模运行Apache Airflow的经验和教训
迁移工具 Air2phin 宣布开源,2 步迁移 Airflow 至 Dolphinscheduler
为什么数据科学家不需要了解Kubernetes
自学14天后,我毁掉了自己的数据工程师面试
没看过这篇文章,别说你会用Airflow
热门
标签
更多标签
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM
活动推荐
运营活动
广告
关闭
领券