如何在Google云存储上运行Python脚本？
在Google云存储上运行Python脚本，您可以按照以下步骤进行操作：
- 创建一个Google云存储（Google Cloud Storage）的存储桶（Bucket），用于存放Python脚本和相关文件。您可以使用Google云控制台或者Google云存储的命令行工具（gsutil）来创建存储桶。
- 将您的Python脚本和相关文件上传到创建的存储桶中。您可以使用Google云控制台的网页界面或者gsutil命令行工具来完成上传操作。
- 在Google云计算引擎（Google Compute Engine）上创建一个虚拟机实例，用于运行Python脚本。您可以选择适合您需求的虚拟机规格和操作系统。
- 连接到虚拟机实例，并安装Python解释器和相关依赖。Google云计算引擎提供了预装了Python的操作系统镜像，您可以选择其中一个来创建虚拟机实例。
- 从Google云存储中下载您上传的Python脚本和相关文件到虚拟机实例中。
- 在虚拟机实例中运行Python脚本。您可以使用命令行工具或者在虚拟机实例中的终端中执行相应的命令。
需要注意的是，为了在Google云存储上运行Python脚本，您需要具备一定的云计算和Python编程的基础知识。此外，您还可以使用Google云计算平台提供的其他服务，如Google Cloud Functions、Google Kubernetes Engine等来运行Python脚本，具体选择取决于您的需求和场景。
推荐的腾讯云相关产品：腾讯云对象存储（COS），它是一种安全、耐用且高扩展性的云存储服务，适用于存储大量非结构化数据，如图片、音视频文件、备份和恢复数据等。您可以通过以下链接了解更多信息：https://cloud.tencent.com/product/cos
相关·内容
3回答
如何允许用户在没有公共访问的情况下从Compute Engine下载文件
python、flask、google-cloud-storage、google-cloud-platform、google-compute-engine
我要尽量缩短时间。
我有一个计算引擎实例，它正在运行Python/Flask。
我想要做的是允许用户从google云存储下载一个文件，但是我不希望这个文件被公开访问。有没有办法让我的Compute实例从云存储中将文件流给用户下载，然后在用户下载完文件后从计算实例中删除该文件？我希望在他们点击下载按钮后立即开始下载。
我正在使用默认的应用程序凭证。子进程不是选项。
SideNote:我考虑这样做的另一种方式是允许登录到网站的每个用户访问桶上的特定文件夹。然而，我不确定这是否可能，如果没有让他们登录一个谷歌帐户。这似乎也将是一个痛苦的实现。
浏览 0提问于2017-01-04得票数 0
回答已采纳
1回答
无云存储Bucket的GCP模型部署
python、google-cloud-ml
我在本地机器上开发了一个基于Tensorflow的机器学习模型。我想把它部署在Google Cloud Platform (Cloud ML Engine)中进行预测。该模型从Google Bigquery读取输入数据，输出预测只能用Google Bigquery编写。在运行模型预测之前，必须运行一些数据准备脚本。我已经将Google Cloud Storage用于模型存储，并将其用于部署，我已经成功地部署了它。但是，代替使用Google Cloud Storage来保存模型(即.pb或.pkl模型文件)，我可以将其存储在GCP (或本地机器)上，并从Cloud ML Engine调用它以进
浏览 24提问于2019-02-28得票数 2
1回答
如何在Google Cloud Platform VM上运行python脚本
python、google-cloud-platform
我有一个python脚本，它在我的计算机上运行得很好，我还在Google Cloud平台上的数据桶中存储了它的副本。
我还使用Debian Stretch设置了一个VM。
如果重要的话，python程序使用了几个库。
如何从此处转到在虚拟机上运行脚本？
在尝试VM方式之前，我尝试使用App Engine运行脚本、requirement.txt和app.yaml文件，这似乎可以工作，但在云shell中过程超时，没有任何输出/结果。
我试着阅读了Google Cloud Platform的文档，谷歌搜索，在youtube上寻找视频等，但似乎什么也找不到。
浏览 0提问于2018-02-04得票数 0
1回答
如何打开存储在连接到google cloud VM实例的存储桶中的文件
google-cloud-platform
我是google cloud的新手，我需要在计算引擎中运行一个python脚本。 我打开了一个新的VM计算引擎实例，打开了一个新的存储桶，并将脚本上传到该存储桶，我可以看到虚拟机已连接到该存储桶，因为当我运行命令以列出VM中的存储桶时，它会找到该存储桶并声明脚本确实存在。 我错过的是如何运行脚本？或者更一般地说，我如何访问这些文件？ 我正在寻找合适的命令，但找不到任何命令，但我感觉应该有这样的命令(既然VM可以找到存储桶和其中包含的文件，我猜它也可以以某种方式访问它们)。我应该如何继续从这里运行脚本？
浏览 28提问于2021-07-26得票数 0
回答已采纳
1回答
哪些是用于将对象复制到云存储存储桶中的凭据
google-cloud-platform、google-cloud-storage、google-iam
我需要将一个对象(文件)复制到名为destination-bucket1的云存储存储桶中。
管理员仅向名为service-account1的服务帐户提供了对destination-bucket1的写访问权限，没有任何个人帐户具有对destination-bucket1的任何访问权限。此外，现有策略不允许为该服务帐号(service-account1)创建密钥。
我通过名为instance1的SSH访问一个计算引擎VM实例，该实例位于相同的service-account1下，因此instance1可以通过service-account1访问destination-bucket1。
如果我使用Cl
浏览 0提问于2020-01-08得票数 0
2回答
如何在Google Cloud中对文件运行Python脚本
python、google-cloud-platform、google-cloud-storage
我在Google Cloud Storage存储桶中有一堆文件，包括一些Python脚本和文本文件。我想在文本文件上运行Python脚本。最好的方法是什么(App Engine，Compute Engine，Jupyter)？谢谢!
浏览 12提问于2019-07-16得票数 0
1回答
How to Read Photos for Deep Learning on Google Cloud Platform Compute Engine VM Instance，通过Jupyter Lab
virtual-machine、google-compute-engine、bucket、jupyter-lab
我已经在GCP上建立了一个带有计算引擎虚拟机和存储桶的项目。
设置为允许完全访问所有云API的访问作用域已经设置了默认区域和区域我相信我已经完成了SSH授权，但根据我读过的文档，我不是100%确定。
我在两台本地计算机上都有大约100,000张照片，我设法将这些照片上传到存储桶中，现在正在尝试使用VM连接的jupyter实验室运行我的算法。我的第一个想法是从bucket对象创建一个列表对象。90分钟后，我尝试做同样的事情，但我的本地文件夹。在失败之后，我尝试在VM实例上挂载存储桶，但我也失败了(我宁愿不走这条路，因为我必须复制文件，这看起来很疯狂)。
我将其与不同的命令!gsutil ls g
浏览 1提问于2019-09-17得票数 0
1回答
如何在Google云中创建4节点集群来运行HPC应用程序
google-cloud-datastore、cluster-computing
我想我已经阅读了Google cloud的所有文档，但都没有找到答案。一切似乎都是针对web服务的。
我想在google cloud engine中创建一个包含4个相同节点的集群，并运行MPI乒乓或MPI应用程序。我对云计算非常陌生
理想情况下，如果我可以使用"gold“实例，我可以使用所需的工具设置该实例，并使用它来创建集群。
任何帮助都将不胜感激。
谢谢
浏览 0提问于2017-12-02得票数 1
2回答
从google云存储桶程序化下载文件
python、google-cloud-storage、boto、google-developer-tools
我想知道如何从google云存储桶中下载文件。
我的用例是运行一个预定的脚本，该脚本每天下载一次.csv文件并将其保存到SQL DB。
我考虑过使用python和google SDK来做这件事，但是在所有的选项中迷失了方向，哪一个更适合我。
谁能解释一下云存储客户端、boto、gsutil和google cloud SDK之间的区别？
谢谢!
浏览 13提问于2017-01-26得票数 0
2回答
有没有办法在Google Cloud Function上创建一个Python脚本，将文件从Bucket下载到您的本地计算机？
python、google-cloud-storage
目前，我知道有两种方法可以将文件从存储桶下载到您的计算机1)手动转到存储桶并单击下载2)使用gsutil 有没有办法在Google Cloud Functions的程序中做到这一点？不能在Python脚本中执行gsutil。我还尝试了这个： with open("C:\", "wb") as file_obj:
blob.download_to_file(file_obj) 但我相信这会在Google Cloud上寻找一个目录。请帮帮我！
浏览 34提问于2020-01-31得票数 0
2回答
写入Google Cloud Bucket失败
php、linux、google-app-engine、google-cloud-storage、google-compute-engine
我一直在尝试使用Google提供的php示例对我的Google Cloud Bucket执行一次简单的编写。我的问题是我的远程Google Cloud VM Server似乎不能正常工作。除了创建客户ID之外，我遵循了网站上的所有说明，因为我已经创建了2个，所以我使用了其中一个。我在尝试实现此功能时观察到的一个问题是，php似乎没有包含google云存储库。我按照网站的指示下载了git，我甚至在php.ini中包含了路径。这就是我包含的include_path = ".:/usr/bin/php:/google-api-php-client/src"，我发现即使在我添加了这个之
浏览 0提问于2015-02-13得票数 0
1回答
当循环遍历许多文件时，如何提高gcs引信的吞吐量？
google-cloud-platform、gcsfuse
我正在处理超过20万个netcdf文件，每个文件是17 MB。它们都在谷歌的云存储桶中，我正试图找到一种使用gcs引信来提高吞吐量的方法。
我正在使用虚拟机和gcs引信来访问这些文件。我查看了gsutil，但在Google文档中看到“单个I/O流的运行速度与gsutil差不多。”使用gcs引信，NCL脚本将花费超过8天，这是太长。对如何提高吞吐量有什么建议吗？谢谢。
浏览 3提问于2019-07-17得票数 0
回答已采纳
4回答
Google云存储:输出路径不存在或不可写
jenkins、permissions、google-cloud-storage、google-cloud-dataflow、gsutil
我正在尝试遵循中的这个简单的数据流示例。
我已经成功地安装了数据流管道插件和gcloud SDK (以及Python2.7)。我还在谷歌云上建立了一个项目，并启用了账单和所有必要的API-正如上面的说明所指定的那样。
但是，当我转到run configurations并将Pipeline Arguments选项卡更改为选择BlockingDataflowPipelineRunner时，在输入创建存储桶并设置我的项目-id之后，点击run将显示：
Caused by: java.lang.IllegalArgumentException: Output path does not exist o
浏览 0提问于2016-03-19得票数 7
1回答
从Compute Engine VM实例访问云SQL :我是否需要将访问令牌从个人计算机复制到VM实例？
google-cloud-sql、google-compute-engine
我正在尝试从我的VM实例中使用云SQL。在创建VM实例时，我为其激活了Cloud SQL选项。云SQL实例授权我的Compute Engine Project访问它。
一开始，我希望在我的虚拟机上安装一些工具，比如google_sql.sh，因为我已经在它上激活了Cloud SQL，但没有:-/
在中，它告诉我应该将本地访问令牌复制到VM实例。我的本地机器是Mac，所以令牌存储在：~user/Library/Preferences/com.google.cloud.plist中，但在我的Linux上，它存储在：~user/.java/.userPrefs/com/google/cloud/sq
浏览 0提问于2013-09-12得票数 0
2回答
Python3中的云函数-从Google Cloud Bucket复制到另一个Google Cloud Bucket
python-3.x、google-cloud-storage
Google有云存储数据传输选项，可以从一个存储桶复制到另一个存储桶，但只有当两个存储桶都在同一个项目中时，这才会起作用。作为cron运行，使用gutil -m rsync -r -d是一个简单的选择，但是我们将所有的bash迁移到python3。因此，我需要一个Python3脚本来使用它作为google cloud函数，每周将整个存储桶从project1复制到project2中的另一个存储桶。
Language: python 3
app : Cloud Function
Process : Copy one bucket to another
Source Project: pro
浏览 0提问于2020-09-21得票数 0
1回答
在多个google应用程序引擎应用程序之间共享google云存储，没有太多设置
google-app-engine、google-cloud-storage
我正在开发一个带有google和google云存储的google应用程序引擎java应用程序。
我希望在多个应用程序引擎应用程序上部署相同的代码，并在每个应用程序引擎应用程序上共享google云存储文件和存储桶。每个应用程序都可以读写到同一个桶中。我该怎么做？我不想让水桶有公共通道。
如何在java中务实地创建一个桶，以便在所有google应用程序引擎应用程序之间共享相同的代码，以便每个应用程序都能使用它？
浏览 0提问于2014-11-11得票数 3
回答已采纳
1回答
确定GCP虚拟机中的带宽
google-cloud-platform
我一个月前在Google Cloud Platform中创建了一台机器，我如何知道Google Compute engine中VM的云流量、带宽和点击数？
浏览 0提问于2018-11-05得票数 0
3回答
Google抛出中的列表文件: AccessDeniedException: 403
google-cloud-platform、google-cloud-storage、gcloud、gsutil
日安，
我是GCS的新手，并试图使用CLI访问合作伙伴的桶。我已经使用提供的文档安装了gsutil (注意:我正在使用macOS)，现在我试图在桶中列出文件。已提供了访问id、密钥和机密，我使用它们创建配置文件时使用：
gsutil config -a
其中产出：
Boto config file "/path/to/.boto" created. If you need to
use a proxy to access the Internet please see the instructions in that
file.
但是，当我使用以下命令列出桶中的文件时：
gsu
浏览 2提问于2020-11-24得票数 0
回答已采纳
2回答
在GCP虚拟机上使用python检索桶
python、python-3.x、google-cloud-platform
我试图在GCP虚拟机上使用Python3 (而不是在本地机器中)。我需要从某个桶中提取数据。这是我使用的代码：
from google.cloud import storage
client = storage.Client()
bucket_name = timetables-new/23/00_H0.json
bucket = client.get_bucket("bucket_name")
它返回以下错误：
Traceback (most recent call last):
File "<stdin>", line 1, in <m
浏览 0提问于2019-09-14得票数 1
回答已采纳
4回答
从谷歌云存储到s3的gsutil rsync在大文件上挂起
amazon-s3、google-cloud-platform、gsutil
在尝试使用以下命令将我的谷歌云存储存储桶备份到亚马逊网络服务s3存储桶时，我遇到了一个较大文件(560MB)挂起的问题：
gsutil -m rsync -rd gs://<MyGoogleBucket>/ s3://<MyS3Bucket>/
我知道连接很好，因为它复制了大约150个较小的文件(9MB)，然后挂起在较大的文件上，没有明显的错误消息，只是在shell中挂起了一个进度条。
当我按ctrl-C退出程序时，我注意到几条消息：
[Errno 104] Connection reset by peer
下面是我的gsutil版本：
gsutil version
浏览 0提问于2019-05-07得票数 1
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储活动推荐
腾讯云开发者
