腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
airflow
web
url
无法
连接
airflow
、
airflow-scheduler
更改
airflow
配置文件,如下所示 broker_
url
= amqp://guest:guest@localhost:5672// celery_result_backend = amqp://guest:guest@localhost:5672// 已启动webui服务器和其他服务,但webui
url
不起作用。
浏览 38
提问于2020-01-11
得票数 0
1
回答
我如何设置一个侵入
连接
到一个ClusterIP服务?
amazon-web-services
、
kubernetes
、
kubernetes-ingress
、
amazon-elb
、
amazon-eks
我想做的事
airflow
-flower <none> foo.bar.com 80 3m46s
airflow
-
web
<none
airflow
-
web
:
web
(<redacted_ip&
浏览 3
提问于2021-01-22
得票数 2
回答已采纳
2
回答
如何使用环境变量定义
Airflow
中的https
连接
airflow
在
Airflow
中,http (和其他)
连接
可以定义为环境变量。但是,很难对这些
连接
使用https模式。这样的
连接
可能是: export
AIRFLOW
_CONN_MY_HTTP_CONN=http://example.com 但是,
无法
定义安全
连接
: export
AIRFLOW
_CONN_MY_HTTP_CONN=https://example.com 因为
Airflow
剥离了方案(http
浏览 24
提问于2020-06-26
得票数 0
4
回答
默认情况下,气流
连接
过多
airflow
我打开了气流,检查了
连接
,发现后面有太多的
连接
在运行。任何想法,如何杀死那些我不使用,或我想知道最低的conn_id运行它。架构 以下是
连接
列表。#
airflow
sends to point links to the right
web<
浏览 4
提问于2016-07-16
得票数 21
回答已采纳
1
回答
如何将AWS ECR的私有镜像与
Airflow
的DockerOperator一起使用?
python
、
amazon-web-services
、
docker
、
airflow
、
amazon-ecr
from datetime import timedeltafrom
airflow
import DAG 'depends_on_past': False, 'start_date':
airflow
.utils.dates.days_ago(export_data&
浏览 57
提问于2021-09-26
得票数 2
5
回答
损坏的DAG:[/
airflow
/dags/a.py]
无法
解密login=None的` `extra`‘参数,缺少FERNET_KEY配置
python
、
airflow
我在没有FERNET_KEY的情况下启动了
Airflow
。一旦我意识到这一点,我做了以下事情:fernet_key= Fernet.generate_key()获取密钥并将其放在
airflow
.cfg中,然后调用
airflow
initdb,但错误仍然出现。当我这样做的时候:
浏览 0
提问于2018-06-13
得票数 10
1
回答
在
Airflow
中配置fs_default
连接
config
、
airflow
我想配置
Airflow
的fs_default
连接
,基本上是为了确保路径总是从相同的起点(我的目录/存储库的根目录)解析。[core] # The folder where your
airflow
pipelines live, most likely
浏览 0
提问于2020-03-25
得票数 0
1
回答
如何在自定义docker镜像上使用CeleryExecutor运行
airflow
python-3.x
、
docker
、
celery
、
airflow
我将
airflow
添加到一个
web
应用程序中,该应用程序手动将包含业务逻辑的目录添加到PYTHON_PATH环境变量中,并执行额外的系统级设置,以便在集群中的所有服务器上保持一致。if [ $SERVICE == "api" ]; then flask db upgrade
AIRFLOW
__CELERY__BROKER_
URL
=amqp:
浏览 34
提问于2020-07-30
得票数 0
回答已采纳
1
回答
在气流中进行数据库请求时出现的问题
airflow
我正在尝试基于数据库调用的响应动态创建任务。但是当我这样做时,run选项就不能进入气流,所以我不能运行。tables = ['a','b','c'] // This works python_callable
浏览 0
提问于2019-08-29
得票数 0
1
回答
airflow
time服务器在长时间无问题后突然停止,“没有来自gunicorn的响应”
airflow
[webserver]# cname you are usingThis is used in automated emails that#base_
url
= http://localhost:8080 base_
url</em
浏览 123
提问于2020-10-24
得票数 0
4
回答
如何隐藏/屏蔽气流
连接
和可变截面的敏感数据?
python
、
airflow
我们在apache
airflow
中有许多AWS
连接
字符串,任何人都可以在
airflow
We服务器
连接
部分看到我们的访问密钥和密钥。如何隐藏或屏蔽
airflow
How服务器中的敏感数据?我们已经在
airflow
配置中启用了身份验证true,因此它不允许未经授权的用户。但我不想在
web
视图中显示我的密钥。
浏览 1
提问于2018-03-28
得票数 6
1
回答
Airflow
远程记录
连接
-
Airflow
1.7.1.3
logging
、
google-cloud-storage
、
airflow
我已经看过下面的帖子了,但我正在尝试为
airflow
1.7.1.3设置这个帖子 有没有具体的
连接
格式示例?{" project ":"","key_path":""}这是我尝试过的。
浏览 1
提问于2018-03-20
得票数 0
2
回答
在Helm安装过程中设置气流变量
kubernetes
、
airflow
、
kubernetes-helm
、
kind
我使用以下命令在kind上安装气流:export NAMESPACE=
airflow
--set images.
airflow
.repository=my-dags \ --values e
浏览 4
提问于2021-12-07
得票数 1
1
回答
Airflow
元数据DB =
airflow
_db?
airflow
我有一个项目要求将
Airflow
元数据DB备份到某些数据仓库(但不使用
Airflow
DAG)。同时,需求提到了一些称为
airflow
_db的
连接
。我对
Airflow
还很陌生,所以我在谷歌上搜索了一下这个话题。我对这部分有点困惑。我们的
Airflow
元数据DB是PostgreSQL (这是从docker-compose构建的,所以我正在修补本地安装),但是当我查看
Airflow
Web
中的
连接
时,它显示
airflow
浏览 21
提问于2020-11-16
得票数 1
回答已采纳
5
回答
从不工作的终端触发气流DAG
python
、
airflow
我正在尝试使用
airflow
来定义我想要从命令行手动触发的特定工作流。 "DAG_NAME", schedule_interval=None,default_args=args)
airflow
trigger_dag DAG_NAME 什么都不会发生。
浏览 2
提问于2016-05-05
得票数 24
1
回答
在Helm (Kubernetes)中使用Values.yaml设置气流
连接
docker
、
kubernetes
、
airflow
、
databricks
、
kubernetes-helm
目前,我计划使用values.yaml文件和env变量设置气流
连接
,而不是在webUI上配置它们。我认为要调整、设置
连接
的设置是:# eg:# '{{ .Release.Name }}-
airflow
-connections'我不知道如何为databricks/emr
连接
设置所有键值对,以及如何使用kubernetes秘密(在pods中已经设置为env vars )来获取值。> # host: &
浏览 8
提问于2022-11-11
得票数 0
回答已采纳
1
回答
需要帮助在气流配置和芹菜执行器中设置BROKER_
URL
celery
、
airflow
错误[core]broker_
url
= pyamqp://username:password据我所知,无论如何,工作节点总是尝试
连接
到本地的rabbitmq服务器,而完全忽略了我的
airflow
.cfg文件中的那个
airflow
.cfg。BROKER_<
浏览 0
提问于2019-02-15
得票数 2
1
回答
Airflow
-图表查询失败
airflow
我刚接触
Airflow
,我正在尝试为我的DAG创建图表,但我一直收到以下错误: SQL execution failed.
浏览 0
提问于2016-06-23
得票数 5
1
回答
如何从码头天蓝色金库中加载环境变量
docker
、
docker-compose
、
azure-keyvault
、
airflow-2.x
在这里,我想从azure密钥库加载sql
连接
字符串。version: '3' &
airflow
-common &
airflow
-common-env
AIRFLOW
__CORE__EXECUTOR: CeleryEx
浏览 4
提问于2022-03-23
得票数 1
1
回答
无法
从
Airflow
应用程序访问Vault服务器
docker
、
docker-compose
、
airflow
、
hashicorp-vault
我正在尝试使用docker-compose在我的本地计算机上使用
Airflow
将Vault设置为s secrets后端,但
无法
建立
连接
。在我的一个dag中,我试图从Vault获取一个秘密,但
连接
被拒绝。 当服务运行时,我可以访问Vault CLI并创建秘密,这意味着Vault正在正常运行。我还尝试了docker compose exec --
airflow
-webserver curl http://vault:8200,看看dag是否有问题,但我得到了同样的
连接
被
浏览 18
提问于2021-07-16
得票数 0
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
任务流管理工具-Airflow配置和使用
使用 Python 和 Scrapy 半小时爬了10 个在线商店的网页
airflow 实战系列:基于 python 的调度和监控工作流的平台
HTTP协议通信原理
GitHub十大Python项目推荐,Star最高26.4k
热门
标签
更多标签
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
活动推荐
运营活动
广告
关闭
领券