腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(2162)
视频
沙龙
1
回答
使用
gcloud
CLI
设置
composer
(
airflow
)
bucket
、
、
、
我一直在
使用
控制台界面创建
composer
环境,然后
使用
cli
设置
三个变量(
使用
QuickStart文档中的示例):
gcloud
composer
environments run etl --locatione
浏览 32
提问于2018-12-13
得票数 1
回答已采纳
1
回答
如何从命令行
设置
/获取json格式的气流变量
、
我正在
使用
cloud shell访问我的
airflow
变量参数( json格式),当我
使用
以下命令时,它会给出完整的json:
gcloud
composer
environments run
composer
001我参考了google上的文档和各种其他链接,但是,我只能找到如何
设置
不是json格式的变量,而是单值变量。
浏览 21
提问于2019-07-19
得票数 1
回答已采纳
2
回答
如何
使用
Cloud
Composer
选择
Airflow
或Python版本?
、
、
我正在
使用
,我注意到它为我选择了和Python (2.7.x)的版本。我想
使用
不同版本的
Airflow
和/或Python。我怎样才能改变这一点?
浏览 5
提问于2018-05-02
得票数 8
1
回答
Cloud
Composer
缺少变量文件
我一直在尝试
使用
airflow
CLI
将环境变量的JSON文件导入到新创建的Cloud
Composer
实例中,但在运行下面的代码时出现错误:Missing variables file.
gcloud
composer
environments run ${
COMPOSER
_NAME} \ variables --这是因为Cloud
Composer
将
浏览 11
提问于2019-01-09
得票数 2
回答已采纳
1
回答
Cloud
Composer
:如何在通过
gcloud
CLI
运行的DAG中运行单个任务
、
我正在尝试在GCP cloud
composer
airflow
实例上的DAG中运行单个任务,并将dag中的所有其他任务都标记为成功。然而,下面的
airflow
命令似乎对我在cloud
composer
上不起作用。task_id: "echo1" <br> execution_date
浏览 0
提问于2020-07-04
得票数 0
2
回答
如何
使用
gcloud
CLI
sub commnds获取Google cloud
Composer
(
Airflow
)环境变量值
、
、
、
、
我正在尝试检索
Airflow
实例上的现有环境变量 当我执行
gcloud
composer
environments run MY_ENV_NAME --location us-east4 variables时,它会正确地获取变量列表 然后我想查看一个特定变量的值,因此基于
airflow
CLI
documentation,我尝试
gcloud
composer
environments run MY_ENV_NAME--location us-east4 variabl
浏览 22
提问于2020-12-16
得票数 0
2
回答
composer
不
使用
导入变量
、
我导入了一个json文件,该文件定义了要由
composer
使用
的变量。我
使用
了命令,可以看到文件被正确导入到<
composer
_bkt>/data/变量,但是,当我访问气流webUI时,我发现没有声明的变量!
浏览 4
提问于2022-02-28
得票数 1
回答已采纳
1
回答
用PyPi包“成功”更新
Composer
气流webserver 502服务器错误
、
请只
使用
AIRFLOW
_HOME环境变量并删除配置文件条目。-around 6-2019年12月-2019气流网服务器错误->结果是环境不可用创建步骤
gcloud
beta
composer
environments create ${X2与2的配置相同)更新2)和3)
使用
.
gcloud
composer
environments up
浏览 1
提问于2019-12-10
得票数 3
2
回答
如何以编程方式清除google-
composer
任务?
、
、
、
我正在
使用
一个动态创建任务的DAG :每次我在DAG中创建一个新任务时,我想清除同一个DAG中的另一个任务,这是可能的吗? 提前感谢
浏览 0
提问于2018-11-08
得票数 1
1
回答
有没有一种方法(自动)在内部获取作曲家的环境信息?
我有一个部署在GKE集群上的
composer
环境,我希望能够通过operators检索这个集群上的信息--例如,无需对其进行硬编码,也不需要手动将其放入环境变量中。我现在想得到的相关信息:
COMPOSER
_
BUCKET
= "<
bucket
_name>"
COMPOSER
浏览 5
提问于2022-11-24
得票数 0
回答已采纳
1
回答
在中运行气流
cli
、
我试图在环境中运行气流测试
cli
,但是它不起作用。这是我运行的命令:输出: ERROR: (
gcloud
.beta.
composer
.environments.run) unrecognized arguments:
浏览 0
提问于2018-05-08
得票数 1
回答已采纳
1
回答
我想将云编写器创建的气流网络服务器的时区从utc更改为jst (亚洲/东京)。
、
、
、
但是,即使"webserver-default_ui_timezone ='JST'“是由气流配置覆盖
设置
的,也不能更改set服务器的时间。
浏览 1
提问于2021-04-22
得票数 0
回答已采纳
1
回答
您可以在Google Cloud
Composer
中访问
Airflow
CLI
吗?
、
、
、
我知道许多常见的气流管理命令都是通过
gcloud
CLI
提供的。但是,我正在对一些DAG调度进行故障排除,并希望直接在集群上
使用
schedule and next_execution命令。
浏览 11
提问于2020-06-27
得票数 0
回答已采纳
2
回答
如何传递“是”标志来回填?
、
、
我试图
使用
gcloud
composer
命令在Google中进行回填,但我很难传递相应的--reset_dagruns参数的-y或--yes。我得到的回应是
airflow
: error: unrecognized arguments: -y。命令:
gcloud
composer
environments run my_env --project my_project --location us-east1 backfill -- --reset_dagruns
浏览 1
提问于2020-06-10
得票数 3
回答已采纳
2
回答
捕获
gcloud
composer
在变量和测试运行中运行响应
、
我想捕捉
gcloud
composer
run的响应。例如,如果我运行
gcloud
composer
environments run some_environment\ --location us-west2 \ list_dags -- -sd /home我试过
使用
$()和backticks,但是当我
使用
echo时,它是空的。我想在/home/
airflow
/gcs/data/test文件夹中而不是在hom
浏览 3
提问于2019-12-04
得票数 1
1
回答
澳大利亚地区数据集的Cloud
composer
问题
、
、
我尝试
使用
cloud
composer
来调度和编排Bigquery作业。Bigquery表在澳大利亚-东南1 region.The云
composer
环境是在美国中央1地区创建的(因为
composer
在澳大利亚地区不可用)。当我尝试下面的命令时,它抛出一个模糊的错误。当我尝试
使用
驻留在欧盟和美国的数据集时,相同的
设置
工作得很好。Command:
gcloud
beta
composer
environments run bq-schedule --loc
浏览 11
提问于2019-02-13
得票数 0
回答已采纳
1
回答
通过
gcloud
设置
具有特殊字符的
Composer
环境变量
、
、
我试图弄清楚如何通过
gcloud
创建Google环境,并
设置
一些特殊字符的环境变量。环境变量示例: API_URL=
gcloud
composer
environments create new-env-1 --location=us-central1,env_type=dev] --node_count=3 --python-version=3 --image-version=
composer
-1.10.0-
airflow
浏览 6
提问于2020-10-25
得票数 1
回答已采纳
4
回答
gcloud
命令失败“在$PATH中找不到可执行文件”
、
$
gcloud
composer
environments run myenv \ backfillstarting container process ERROR: (
gcloud
.
composer
.environments.run我正在
使
浏览 0
提问于2020-04-01
得票数 1
回答已采纳
1
回答
在中
使用
json文件导入变量
、
、
如何
使用
命令行将json文件导入?我尝试了下面的命令[2019-01-17 13:34:54,117] {app.py:44} WARNING - Using default
Composer
Environment Variable
浏览 0
提问于2019-01-17
得票数 5
回答已采纳
2
回答
在apache气流中安装刮痕会导致INVALID_ARGUMENT
、
、
、
我正在尝试
使用
下面的命令从Scrapy中安装PyPi。
gcloud
composer
environments update $(
AIRFLOW
_ENVIRONMENT_NAME) \ --location $(
AIRFLOW
_LOCATION) requirements.txt是这样的。
gcloud
composer
environments upda
浏览 0
提问于2020-03-16
得票数 2
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
PyTorch终于能用上谷歌云TPU,推理性能提升4倍,该如何薅羊毛?
AWS推出Apache Airflow全托管工作流MWAA
如何用TensorFlow和Swift写个App识别霉霉?
自学14天后,我毁掉了自己的数据工程师面试
硬核干货|使用GitLab CI部署Rancher集群
热门
标签
更多标签
云服务器
ICP备案
云直播
对象存储
腾讯会议
活动推荐
运营活动
广告
关闭
领券