腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
2
回答
在
Google
Cloud
Composer
中
运行
实例
中
的
代码
google-cloud-platform
、
google-compute-engine
、
airflow
、
google-cloud-composer
我是
google
cloud
composer
的
新手。我
在
谷歌云计算引擎中有一些
代码
,例如: test.py 目前,我使用Jenkins作为我
的
调度器--我
运行
的
代码
如下 echo "cd /home/user/src/digital_platform &&/home/user/venvs/bdp/bi
浏览 29
提问于2019-06-19
得票数 0
1
回答
无法
在
Google
中使用
google
.
cloud
.sql.connector模块
google-cloud-sql
、
google-cloud-composer
我正在尝试安排数据流管道作业,以便从CloudSQL SQLServer
实例
读取内容并将其写入BigQuery表。我使用
google
.
cloud
.sql.connectorpytds设置连接。当我通过
Google
运行
手动数据流作业时,它成功地
运行
。气流版本(使用)失败了,给出了名称错误。“NameError:未定义”名称“连接器” 我启用了保存主会话选项。另外,我已经
在
py_requirements选项中提到了连接器模块,并且正在安装它(按照气流日志)。INFO -收集
浏览 9
提问于2022-11-03
得票数 0
2
回答
为什么
在
应用程序引擎上创建
Google
类TextToSpeechClient
的
实例
时会出现服务器致命错误?
php
、
google-app-engine
、
composer-php
、
google-text-to-speech
、
app.yaml
在
deploying环境中部署PHP时,我尝试创建一个TextToSpeechClient类
实例
时,遇到了一个致命
的
服务器错误。
在
本地主机上,它工作正常,没有任何问题。下面是错误消息: “注意: PHP : PHP致命错误:未登录错误:未在/app/web/get_voices2.php:46
中
找到
的
类'
Google
\
Cloud
\TextToSpeech\V1\TextToSpeechClient请注意,app
浏览 5
提问于2020-05-12
得票数 0
回答已采纳
1
回答
使用Terraform
中
的
python将csv数据加载到bigquery
google-cloud-platform
、
terraform
、
terraform-provider-gcp
读取csv文件并通过数据流将其加载到bigquery -为此使用python编码,而不是模板-如何使用terraform(GCP)帮助执行此任务
浏览 14
提问于2022-11-13
得票数 0
1
回答
在
Google
Composer
/Airflow上使用KubernetesPodOperator挂载文件夹
kubernetes
、
airflow
、
google-cloud-composer
我正在尝试挂载dags文件夹,以便能够
在
Aiflow上
的
KubernetesPodOperator
中
运行
python脚本,但我不知道怎么做。在生产中,我想在谷歌作曲家。这是我
的
任务: task_id='pod-ex-minimum', cmds=["bash", "VolumeMount("my-volume", "
浏览 4
提问于2021-10-12
得票数 1
1
回答
Google
Cloud
Composer
从
Google
Container注册表中提取陈旧图像
kubernetes
、
airflow
、
google-cloud-composer
我正在尝试通过
Google
Cloud
Composer
和KubernetesPodOperator
在
一个环境
中
运行
一个Airflow任务,该环境是从一个私有的
Google
Container RegistryContainer Registry和
Cloud
Composer
实例
在
同一个项目下,一切工作正常,直到我更新了DAG引用
的
镜像。当我更新Container Registry
浏览 21
提问于2020-10-09
得票数 0
6
回答
在哪里保存
Google
Cloud
Composer
连接设置
的
服务帐户密钥文件?
google-cloud-platform
、
airflow
、
google-cloud-composer
我正在尝试使用服务帐户密钥
在
Google
Cloud
Composer
中
设置
Google
Cloud
Platform连接。因此,我创建了一个GCS存储桶,并将服务帐户密钥文件放入该存储桶
中
。密钥存储
在
JSON
中
。
在
keyfile path字段
中
,我指定了一个GCS bucket,
在
keyfile JSON字段
中
,我指定了文件名。作用域是。<em
浏览 2
提问于2018-06-06
得票数 6
1
回答
其他
google
云服务帐户
的
Cloud
composer
身份验证
python
、
airflow
、
google-cloud-composer
、
google-search-console
没有深度
的
科学家试图做一些数据工程。我目前正在尝试将手动执行
的
本地python脚本(生成本地csv文件)转换为
cloud
composer
计划
的
API调用,从而将数据存储到
google
云存储并合并到bigquery表
中
。如果我
的
cloud
composer
的
google
帐户触发了所有这些步骤:
google
search console API (目前凭据是使用搜
浏览 39
提问于2021-07-28
得票数 0
回答已采纳
1
回答
在
Google
的
气流
实例
上安装apache- airflow -backport-providers-
google
模块
airflow
、
google-cloud-composer
、
google-cloud-data-fusion
我需要从
Composer
中
执行数据融合管道,为此使用Data: 当我试图在编写器For det
浏览 6
提问于2021-10-15
得票数 0
回答已采纳
1
回答
Google
Cloud
Composer
:关于语言和工作流程
的
问题
google-cloud-platform
、
workflow
、
google-cloud-composer
我正要写一篇关于
Google
Cloud
Composer
的
论文,我遇到了一些不确定因素。
在
Google
Cloud
Composer
中
,DAG是用python编写
的
。那么,这是否意味着我只能
运行
python函数,或者我也可以调用保存在
google
云中
的
java函数? 如果我继续使用python,是否所有内容都必须放在一个文件
中
?我猜这是一个微
浏览 12
提问于2021-05-11
得票数 0
1
回答
使用Python从气流
中
在
Pub/Sub中发布消息有问题
python-3.x
、
google-cloud-platform
、
publish-subscribe
、
google-cloud-pubsub
、
google-cloud-composer
我试图
在
Pub/Sub中发布一条消息,但我得到了以下错误:from
google
.
cloud
import pubsub_v1 topic_path最后,是否有不同
的
方式来等待消息
的
发布?
浏览 1
提问于2021-08-30
得票数 0
回答已采纳
1
回答
尝试从本地气流
运行
DataProcSparkOperator任务时
的
HttpError 400
airflow
、
google-cloud-dataproc
、
directed-acyclic-graphs
我正在测试一个DAG,我曾经
在
Google
Composer
上没有错误地
运行
在一个本地安装
的
Airflow上。DAG启动
Google
Dataproc集群,
运行
Spark作业(位于GS存储桶上
的
JAR文件),然后关闭集群。"> 看起来URI不正确/不完整,但我不确定是什么原因造成
的
。下面是我
的
DAG
的
要点。所有其他任务
的
执行都没有错误,唯一
的</e
浏览 8
提问于2019-03-05
得票数 1
回答已采纳
2
回答
如何在kubernetes for
Google
cloud
composer
上apt-get安装包
docker
、
kubernetes
、
airflow
、
google-cloud-composer
我正在使用
Cloud
composer
来编排我
的
airflow
实例
,但不确定如何为airflow worker bash安装包。之前,我使用docker
在
google
计算引擎
实例
上
运行
airflow,通过docker make文件很容易指定需求。作为kubernetes和
Cloud
composer
的
新手,我想知道是否可以为kubernetes/
Cloud
com
浏览 1
提问于2018-06-13
得票数 3
2
回答
如何按计划自动
运行
Google
Cloud
的
"AI笔记本“?
python
、
google-cloud-platform
、
cloud
Google
cloud
平台中
的
Notebooks对于云中
的
Python开发来说已经很棒了,但最后一个缺失
的
部分只是按计划
运行
现有的notebooks。有一百万种不同
的
工具(Airflow、造纸厂、
Google
Cloud
Jobs、
Google
Cloud
Scheduler、
Google
Cloud
Cron Jobs),作为一个不熟悉
Cloud</e
浏览 16
提问于2021-07-29
得票数 1
1
回答
Google
Cloud
Client Library PHP安装失败
php
、
composer-php
、
google-cloud-platform
我尝试通过终端使用
composer
安装
Google
Cloud
Client Library for PHP。我
的
服务器
中
已经有了
composer
,并且我
运行
以下
代码
:但不幸
的
是,它失败了,并给出了这个返回错误: Fatal error: Callto undefined function Symfony\Po
浏览 1
提问于2016-11-01
得票数 1
1
回答
如何使用
Cloud
Composer
在外部集群
中
调度Kubernetes工作负载
kubernetes
、
google-kubernetes-engine
、
airflow
、
google-cloud-composer
我计划使用
Google
Cloud
Composer
(Apache Airflow)来管理我们
的
数据管道。某些处理步骤是
在
Docker镜像
中
定义
的
,我希望触发该镜像以
在
Google
Kubernetes引擎上
运行
。这些处理步骤通常是资源密集型作业,我想知道调度它们
的
最佳方法是什么。然而,据我所知,此工作负载将在现有的
Cloud
Composer
Kubernet
浏览 6
提问于2019-08-21
得票数 1
回答已采纳
1
回答
安装一个
composer
包
的
多个版本
php
、
dependencies
、
composer-php
、
organization
我被推入了“美妙”
的
Composer
世界,因为PHP库开始不提供手动下载和安装源
代码
的
简单方法。我们有一个非常大
的
系统,有几十年
的
代码
,所以一些不可避免
的
事情会发生,例如:在当前项目中使用新
的
库版本,而不中断依赖于旧库versionUpgrade如果我这样做了: cd /libraries/
com
浏览 10
提问于2022-05-12
得票数 1
回答已采纳
2
回答
Cloud
Composer
grpcio Python包
python-3.x
、
google-cloud-platform
、
google-cloud-composer
我想在
Cloud
Composer
环境中将grpcio包从1.23.0更新到1.29.0。如何做到这一点? 是否需要将其添加到
Composer
控制台
的
PyPI包
中
?
浏览 15
提问于2020-10-06
得票数 0
2
回答
PHP -
google
vision API -找不到类
php
、
google-vision
我
在
尝试使用
google
vision API时收到此错误消息 Fatal error: Uncaught Error: Class '
Google
\
Cloud
\Vision\VisionClient上用
的
是xampp。我使用
composer
安装了
Google
api (以管理员身份)
composer
require
google
/
cloud
-vision 我也
运行
(以admi
浏览 32
提问于2020-10-09
得票数 0
2
回答
将PyPI包添加到
Composer
环境时出错
python
、
google-cloud-platform
、
pypi
、
google-cloud-composer
我刚刚创建了一个新
的
Cloud
Composer
环境,
在
尝试向该环境(例如
google
-
cloud
-pubsub)添加一些PyPI包时出现错误。这是关于环境
的
数据: 我
在
尝试添加
google
-
cloud
-pubsub时遇到
的
错误是这样
的
:安装PyPI包失败。Collecting grpc-
googl
浏览 35
提问于2020-02-20
得票数 0
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
Starlight:帮助Python代码在Go中运行的工具
Composer 中国全量镜像开源了,一起让 PHP 社区更繁荣
如何使用Hyperledger Caliper在谷歌云上测试您的区块链
最受印度用户欢迎的相机产品之一,美图BeautyPlus和它背后的 Google Cloud
Google发布高性能切割模型ShapeMask
热门
标签
更多标签
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
活动推荐
运营活动
广告
关闭
领券