腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
在
本地
安装
气流
时
出现问题
、
我
在
本地
安装
了airflow,因为我正在测试airflow (2.0.0)中的sftp操作符。当我尝试运行这段代码
时
from airflow.providers.sftp.operators import sftp_operatorimportremote_route_to_copy", dag=dag get_operation
浏览 68
提问于2020-12-29
得票数 0
回答已采纳
1
回答
气流
2.x中DAG导入错误的日志消息
我
在
本地
运行Airflow 2.x,使用中提供的Docker文件。
在
本地
文件系统(
安装
到
气流
容器中)的.当
气流
试图导入DAG
时
,我找不到来自web服务器、调度程序或工作人员的任何日志消息,这些消息将指示问题或具体问题是什么。 相反,我必须逐行阅读我的代码,并寻找一个问题。更复杂的是,我
在
Windows 10上的
本地
Python环境和用于
气流
的Python环境是不同的版本,并且
安装
了
浏览 1
提问于2021-04-07
得票数 4
1
回答
在
Ubuntu通过WSL
安装
时
找不到
气流
命令--如何将它添加到路径中?
、
、
、
我
在
WSL上有Ubuntu20.04和python 3.10.6。export AIRFLOW_HOME=~/airflowmyname@LAPTOP-28BMMQV7:/root$ ls -l ~/.local/bin 我能在文件列表中看到
气流
215 Nov 20 14:17 airfl
浏览 2
提问于2022-11-20
得票数 0
2
回答
在
重新启动码头集装箱
时
,
气流
变量的值无效。
、
、
在
一些远程风流实例中,有一长串的dags和相关的
气流
变量,其副本正在我的
本地
系统中运行。来自远程
气流
实例的所有变量都导入到我的
本地
气流
实例中。问题:每当我重新启动
气流
容器
时
,在前一个容器运行期间导入的所有变量都会像这样失效。 再次围绕导入变量来修复与变量相关的错误。然
浏览 1
提问于2020-09-08
得票数 2
回答已采纳
1
回答
在
码头上运行
气流
,“导入错误,模块未找到”
、
、
、
我正在尝试
在
本地
测试DAG,并在Docker中
在
本地
设置
气流
。当我
在
localhost上使用web登录
时
,我可以看到所有的示例dags,但是我试图测试的一个dag出现在顶部,有以下错误:....ModuleNotFoundError: No module named '
浏览 12
提问于2021-12-22
得票数 1
1
回答
气流
运算符使用gcloud beta dataproc命令
、
、
、
有没有人知道,如果它存在一个
气流
运算符,可以做什么的gcloud测试版命令?我正试图
在
GKE集群上启动一项星火作业。
浏览 3
提问于2020-05-04
得票数 0
回答已采纳
2
回答
在
Windows上
安装
气流
、
、
、
、
我想
安装
一个
气流
工人在windows机器上。如何在寡妇中设置
气流
工作人员:它可以
本地
安装
还是应该使用*nix仿真器?
浏览 1
提问于2016-06-19
得票数 3
1
回答
Apache
气流
:
在
同一台
本地
机器上
安装
两个实例
我
在
本地
Ubuntu机器中有一个
气流
实例。这个实例不能很好地工作,所以我想再次
安装
它。问题是我不能删除当前的实例,因为它被其他人使用,所以我想在同一台机器中创建一个新的
气流
实例,以便在那里放置各种参数。谢谢!
浏览 1
提问于2022-05-26
得票数 0
回答已采纳
1
回答
向
气流
way服务器/调度器+工作人员和工作流分发代码的最佳方法
、
人们发现什么是将代码(dags)分发给
气流
、way服务器/调度器+工作人员的最佳方法?我试图
在
一大群工人身上运行芹菜,以至于任何手动更新都是不切实际的。我现在正在码头上部署
气流
,并使用s3fs,它不断地
在
我身上崩溃,并创建奇怪的core.###文件。我正在探索其他解决方案(即StorageMadeEasy,DropBox,EFS,从git.更新的cron作业)但是
在
我探索解决方案的时候,我很想得到一点反馈。如果使用共享卷(如s3fs ),那么每次更新进程
时
都会重新启动调度程序吗
浏览 0
提问于2018-05-23
得票数 4
回答已采纳
2
回答
如何为其修改“docker-组合-local.yml”以
安装
所有需求(需要在
本地
运行Amazon环境)
、
、
我运行是为了运行
本地
Apache
气流
环境(
在
Docker中)。 但是,
在
使用./mwaa-local-env start创建容器之后,当我检查ModuleNotFoundError文件
时
,我反复得到了损坏的DAG ModuleNotFoundError‘(请参阅,尽管我的文件中还有一些我需要的当我将我的/docker/config/requirements.txt文件与
在
气流
容器中运行的pip freeze命令的输出进行比较<em
浏览 7
提问于2022-02-15
得票数 1
1
回答
如何开始使用
气流
,通过创建一个DAG来调用我
在
另一个回购(按计划)中的python代码?
、
我的
本地
机器上有一个git,带有一些python代码c:\repos\myrepo\src\test.py <==,这是我希望
气流
按计划运行/执行的python脚本。现在,我希望
气流<
浏览 1
提问于2021-05-21
得票数 1
1
回答
如何引用eclipse中的Python
气流
包?
、
、
我使用命令(
在
Windows的cmd提示符中) pip install apache-airflow-providers-google
在
我的
本地
Windows膝上
安装
气流
包。pip list显示包是存在的: 然而,
浏览 4
提问于2021-05-21
得票数 0
1
回答
气流
库伯内特斯执行器不创建吊舱
、
、
、
、
我正试图创建一个与库伯奈特斯执行者
气流
的设置。然而,我有一个问题,
在
执行任务
时
,
气流
无法创建吊舱。但是,初始设置能够很好地创建组成部分。 库贝克尔应用-n
气流
-分期-f roles
浏览 3
提问于2021-10-29
得票数 0
回答已采纳
2
回答
MWAA:
安装
来自requirements.txt的
气流
Google供应商
时
遇到麻烦
、
、
、
、
我正在尝试建立一个MWAA
气流
2.0环境,它集成了S3和GCP的Pub/Sub。虽然我们
在
初始化环境方面没有问题,但是我们
在
安装
一些依赖项和导入Python包(特别是apache-airflow-providers-google==2.2.0. )
时
遇到了困难。我们已经按照AWS的规定包含了,激活了所有的
气流
日志记录信任,并使用测试了requirements.txt文件。
在
使用进行测试
时
,我们注意到使用带有约束的requirements.tx
浏览 5
提问于2021-07-19
得票数 2
1
回答
如何从
本地
创建的python dags复制到
本地
安装
的dockertool box,并与
气流
镜像一起运行?
、
、
我已经使用docker工具箱
在
Windows 8 64位上
安装
了puckel-airflow图像。 我已经
在
本地
创建了一个hello world Python scrpit ie,dag。现在我想把我的Python scrpit从
本地
机器转移到docker工具箱的
气流
镜像,这样我就可以运行带有特定标签的
气流
镜像了。无法找到正确的步骤,以便从
本地
c驱动器复制到dockertool box
气流
图像。注意:
在
dockert
浏览 11
提问于2021-02-08
得票数 0
2
回答
气流
2.0.1: Pod模板覆盖不像预期的那样适用于KubernetesExecutor
、
、
、
、
安装
:
气流
2.0.1与Kubernetes 1.18和Python3.8,Kubernetes客户端: 18.17.xapiVersion: v1metadatadags_volume_mount_point = <volume-mount-point>问题是,当某些键从pod_template_file中正确读取
时
,当从ecr中提取图像
时
,我可以验证这一点,因为我得到
浏览 7
提问于2021-06-10
得票数 1
2
回答
如何将
气流
调度器部署到AWS EC2?
、
、
、
、
我试着用
气流
在AWS上建立一个简单的数据管道。我已经创建了一个DAG,它每天将数据刮到S3上,然后
在
EMR上运行一个火花作业来处理它。我目前正在我的笔记本电脑上运行
气流
调度器,但我当然知道这不是一个好的长期解决方案。 因此,我想提供一些关于将调度程序部署到EC2的技巧(站点大小、部署进程或任何其他有用的信息)。
浏览 2
提问于2020-08-30
得票数 1
回答已采纳
1
回答
Postgres数据库拒绝从
气流
连接:服务器是否
在
主机"localhost“(127.0.0.1)上运行并接受TCP/IP连接端口5432?
、
、
、
我有一个现有的数据库(Postgres),我想连接到我的主机上的apache-
气流
(Windows 10),我在运行ubuntu的WSL上
安装
了airflow。由于我能够让
气流
网络服务器
在
我的
本地
主机上运行(端口:8081),所以
安装
很顺利,工作正常。 我试着将
气流
连接到我现有的数据库(carPrices),传递所有必要的参数,这些参数都是正确的。每当我单击connect按钮
时
,它都会报告此错误.“无法连接到服务器:拒绝连接是
在
主机&
浏览 10
提问于2022-11-03
得票数 0
1
回答
如何将
气流
从码头转换为局部系统
、
我
在
码头上
安装
了
气流
。我想知道如何改变从码头到我的
本地
系统的
气流
回家路径。例:
气流
之家(现在):/usr/local/airflow想要改为:mysystempath docker run -d -p 8080:8080 -v /path/to/dags/on/your/local/machine/:/usr/local/airflow/d
浏览 5
提问于2019-09-27
得票数 1
回答已采纳
1
回答
Docker
气流
运行脚本找不到文本文件([Errno 2]没有这样的文件或目录)
、
、
、
、
我对
气流
很陌生。我能够跟踪一个视频并创建docker-compose yml文件、Dockerfile和一个dag文件。我可以查看我的守护进程并运行它。
在
我的脚本中,我试图打开一个文本文件(.txt),但是我得到了以下错误:FileNotFoundError: \[Errno 2\] No such file or directory。我的文本文件
在
正确的位置。脚本运行在
本地
python环境上。我不知道当我
在
气流
中运行时,它为什么会显示为一个错误。 我的docker-compose.ym
浏览 2
提问于2022-03-30
得票数 0
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
为什么安装软件时,软件默认的安装路径都是在C盘?
马斯克实控的X公司(原推特)疑似在加在Hyperlinks时出现问题。
记录一个在Mac OS X 中本地安装Ghost 的报错问题
双法兰传力接头在安装时怎样进行定位?
激光位移传感器在安装时需要考虑什么因素?
热门
标签
更多标签
云服务器
ICP备案
对象存储
腾讯会议
云直播
活动推荐
运营活动
广告
关闭
领券