Google AI平台无法写入云存储
Google AI平台是谷歌提供的一种云计算服务，它专注于为人工智能开发者提供强大的工具和资源，以便他们能够更轻松地构建、训练和部署机器学习模型。
在Google AI平台中，确实无法直接将数据写入云存储。然而，Google AI平台提供了其他途径来处理和存储数据。
首先，Google AI平台支持与Google Cloud Storage（GCS）进行集成。GCS是谷歌提供的一种云存储服务，它可以用于存储和管理大规模的数据。通过将数据存储在GCS中，您可以在Google AI平台上使用这些数据进行训练和推理。
其次，Google AI平台还提供了Google BigQuery的集成。BigQuery是谷歌提供的一种快速、强大的云端数据仓库和分析工具。您可以将数据导入到BigQuery中，并在Google AI平台上使用BigQuery进行数据分析和处理。
此外，Google AI平台还支持与Google Cloud SQL进行集成，Cloud SQL是谷歌提供的一种完全托管的关系型数据库服务。您可以使用Cloud SQL来存储和管理结构化数据，并在Google AI平台上进行相关的数据处理和分析。
总结起来，虽然Google AI平台无法直接写入云存储，但它提供了与Google Cloud Storage、Google BigQuery和Google Cloud SQL等服务的集成，使您能够在云端进行数据存储、处理和分析。这些集成为开发者提供了丰富的选择，以满足各种不同的数据处理需求。
相关产品和介绍链接：
- Google Cloud Storage：https://cloud.google.com/storage
- Google BigQuery：https://cloud.google.com/bigquery
- Google Cloud SQL：https://cloud.google.com/sql
相关·内容
1回答
使用大查询或大表查询聚合值的用例？
google-bigquery、bigtable、google-cloud-bigtable
我用它来设计30 TB文本文件的存储，作为在Google云上部署数据管道的一部分。我的输入数据是CSV格式，我希望尽量减少为多个用户查询聚合值的成本，这些用户将使用多个引擎在云存储中查询数据。对于这个用例，下面哪个选项更好呢？
使用云存储进行存储，并链接大查询中的永久表以进行查询，或使用Cloud表进行存储，并在计算引擎上安装HBaseShell来查询大表数据。
基于下面对这个特定用途的分析，我发现下面的云存储可以通过BigQuery查询。此外，Bigtable支持CSV导入和查询。BigQuery限制还提到，根据文档，在CSV、JSON和Avro的所有输入文件中，每个加载作业的最大大小为15
浏览 0提问于2019-01-24得票数 0
回答已采纳
1回答
设置存储集成时，在我的谷歌云帐户中看不到STORAGE_GCP_SERVICE_ACCOUNT
snowflake-cloud-data-platform
我正在执行以下步骤：https://docs.snowflake.com/en/user-guide/data-load-snowpipe-auto-gcs.html，并且在步骤6中遇到了问题 我跑了一下： create storage integration my_integration
type = external_stage
storage_provider = gcs
浏览 23提问于2021-08-20得票数 0
1回答
使用BigQuery的Angular10，获取访问被拒绝: BigQuery BigQuery:获取驱动器凭据时权限被拒绝
firebase、google-bigquery、angular10
我正在使用“@google-cloud/ BigQuery”将Angular10、Firebase和bigquery集成在一起。我在我的项目中创建了一个函数文件夹，并在其中添加了关键的json文件，该文件是在Google Cloud控制台上生成服务帐户json后获得的。
我的谷歌仪表板中有两个数据集，它们的源是BigQuery Drive.But，当我试图查询这些表时，我遇到了错误。
在我的function文件夹中有一个index.js文件，我在其中使用以下命令初始化我的BigQuery客户端：
const bigqueryClient = new BigQuery({
keyFi
浏览 15提问于2021-06-11得票数 0
1回答
BigQuery:将BigQuery表从美国多个地区导出到另一个地区的GCS是否需要支付传输费？
google-cloud-platform
当将BigQuery表从美国多个地区导出到另一个地区的GCS时，是否存在传输费？
如下图所示，只有美国多个地区才能出口到其他地区.但是，没有提到这项行动的费用。
https://cloud.google.com/bigquery/docs/exporting-data?hl=en
例外情况:如果您的数据集位于美国多区域位置，则可以将数据导出到任何区域或多区域位置的云存储桶中。
在不同的地方都有这样的说法:复制数据集或在区域之间复制GCS需要支付传输费。然而，没有提到这一出口业务的转移成本。
谢谢。
浏览 0提问于2020-02-04得票数 3
回答已采纳
1回答
“您还没有创建任何类型。”创建云SQL实例时出错
php、google-app-engine、google-cloud-sql、google-cloud-datastore
我最初使用API控制台创建了一个项目，让我们称它为projectA。然后我申请将它列入PHP部署的白名单，它被授予了访问权限。然后我尝试通过cloud.google.com创建一个云sql实例，我得到了奇怪的错误消息：
您尚未创建任何类型。
现在，当我返回api控制台时，projectA已经不在了。但是，我仍然可以看到并修改projectB。在cloud.google.com界面中，projectB有7个可用的服务：
1)应用引擎2)计算引擎3)云存储4) BigQuery 5) API 6)云数据存储7)云SQL
因此，我可以轻松地为projectB创建一个云SQL实例。然而，在cloud.
浏览 2提问于2013-06-25得票数 0
回答已采纳
1回答
如何在python jupyter notebook中运行bigquery SQL查询
python、google-bigquery、jupyter-notebook
我尝试在Jupyter notebook中从Google BigQuery运行SQL查询。我按照这里写的做所有的事情，https://cloud.google.com/bigquery/docs/bigquery-storage-python-pandas#download_query_results_using_the_client_library。我打开了一个客户端帐户并下载了JSON文件。现在我试着运行这个脚本： from google.cloud import bigquery
bqclient = bigquery.Client('c://folder/client_ac
浏览 39提问于2021-10-02得票数 0
回答已采纳
2回答
使用Laravel将图像文件上传到google云
laravel、google-cloud-storage、image-upload
嗨，我已经尝试上传图像文件到谷歌云存储使用laravel。我已经通过composer集成了google，我试图与邮递员进行点击，我将获得网址并将其存储在我的数据库中，但是图像文件并没有被上传到google中的文件夹中，.i创建了一个名为“avatars”的文件夹。这是我的密码。这是我的控制器
public function updateAvatar (AvatarUploadRequest $request) {
$me = Auth::user();
$disk = Storage::disk('gcs');
$url = $disk->url(
浏览 1提问于2018-07-09得票数 1
回答已采纳
3回答
以高效的方式从BigQuery读取到Spark？
apache-spark、google-bigquery、google-cloud-dataproc、google-hadoop
当使用从BigQuery读取数据时，我发现它首先将所有数据复制到Google Cloud Storage。然后将这些数据并行读取到Spark中，但当读取大表时，复制数据阶段需要很长时间。那么有没有更有效的方法将数据从BigQuery读取到Spark中呢？
另一个问题:从BigQuery阅读由2个阶段组成(复制到GCS，从GCS并行阅读)。复制阶段是否受Spark簇大小的影响，还是需要固定的时间？
浏览 6提问于2017-01-04得票数 7
回答已采纳
1回答
导出的数据流模板参数未知
google-cloud-dataflow、google-cloud-dataprep
我已经从Dataprep导出了一个云数据流模板，如下所示： https://cloud.google.com/dataprep/docs/html/Export-Basics_57344556 在Dataprep中，流通过通配符从Google Cloud Storage拉入文本文件，转换数据，并将其附加到现有的BigQuery表中。所有工作都按预期进行。 但是，当尝试从导出的模板启动数据流作业时，我似乎无法获得正确的启动参数。错误消息不是很具体，但很明显，我没有得到正确的位置(输入和输出)。 谷歌为这个用例提供的惟一模板(可在https://cloud.google.com/dataflow
浏览 12提问于2019-02-11得票数 0
1回答
无云存储Bucket的GCP模型部署
python、google-cloud-ml
我在本地机器上开发了一个基于Tensorflow的机器学习模型。我想把它部署在Google Cloud Platform (Cloud ML Engine)中进行预测。该模型从Google Bigquery读取输入数据，输出预测只能用Google Bigquery编写。在运行模型预测之前，必须运行一些数据准备脚本。我已经将Google Cloud Storage用于模型存储，并将其用于部署，我已经成功地部署了它。但是，代替使用Google Cloud Storage来保存模型(即.pb或.pkl模型文件)，我可以将其存储在GCP (或本地机器)上，并从Cloud ML Engine调用它以进
浏览 24提问于2019-02-28得票数 2
3回答
如何在google云中使用经过训练的模型实现预测的自动化
google-cloud-platform、google-bigquery、google-cloud-dataflow、google-cloud-composer
我有来自Firestore网站用户的数据。
为了运行机器学习模型，我在Google BigQuery中插入了一些这些数据。
我有训练机器学习模型的经验，但我没有获得新数据预测的经验。
我读到过，我可以在Google云存储中上传这个经过训练的模型，然后把它放到人工智能平台上，但是我不知道我必须遵循的过程，因为新的数据将被插入Bigquery中，使用这些新的数据，我想做预测，然后选择这个预测，然后再把它们放到Firstore中。
我认为这可以用Dataflow (Apache )或Dataflow(气流)来完成，我可以将这个过程自动化，并安排它每周运行所有过程，但我没有使用这种技术的经验，有人能推
浏览 5提问于2019-10-18得票数 2
回答已采纳
1回答
我有一个conda环境，我想在其中安装Jupyter，以便与Google BigQuery一起使用。 谷歌在https://cloud.google.com/bigquery/docs/visualize-jupyter和https://cloud.google.com/bigquery/docs/visualize-jupyter#install_the_client_libraries上提供了使用Jupyter和BigQuery的文档，声明可以使用以下方式安装所需的依赖项： pip install --upgrade 'google-cloud-bigquery[bqstorag
浏览 10提问于2021-10-31得票数 0
回答已采纳
3回答
Cloudflare提供的Google Cloud Function中出现配额超出错误
google-bigquery
我们使用Cloudflare提供的Google Cloud函数将数据从Google Cloud Storage导入到Google BigQuery (请参阅：https://developers.cloudflare.com/logs/analytics-integrations/google-cloud/)。云函数遇到一个错误：“超出配额:您的表超出了每个表的导入或查询追加的配额” 我查询了INFORMATION_SCHEMA.JOBS_BY_PROJECT表，发现errorresult.location是'load_job_per_table.long‘。作业is是'26
浏览 55提问于2021-03-18得票数 1
3回答
Google云存储的firebase云函数API错误
node.js、firebase、firebase-realtime-database、google-cloud-functions
随着Firebase Cloud functions的引入，我们正在考虑将一些当前的node.js服务器端代码转移到云函数上。我遇到的一个问题是从GCS存储桶下载文件到磁盘上的临时文件，然后将其作为附件通过电子邮件发送(使用mailgun js)。
让我感到悲哀的代码片段是：
return mkdirp(tempLocalDir).then(() => {
const bucket = gcs.bucket(gcsBucket);
const tempFilePath = tempLocalDir + gcsFile;
return bucket.file(gcs
浏览 2提问于2017-03-27得票数 2
3回答
是否可以将Cloud SQL或Cloud Spanner与Google Data Catalog交互
google-cloud-platform、google-cloud-sql、google-cloud-spanner、google-data-catalog
我能够在谷歌数据目录中发现Bigquery数据集、GCS文件，但在云数据目录UI中找不到Cloud SQl或Cloud Spanner选项。 是否可以在数据目录中查看Cloud SQL表、Cloud Spanner表数据？如果是，请建议步骤或提供文档链接。 谢谢。
浏览 39提问于2020-09-29得票数 1
1回答
为什么谷歌推荐使用云存储的CloudKMS应用层加密？
security、encryption、google-cloud-platform、google-cloud-storage、google-cloud-kms
在上，关于cloud.google.com上的秘密管理，有一段内容如下：
使用Cloud中的密钥进行应用层加密。使用此选项，您可以在现有Google加密的基础上，使用存储在Cloud中的密钥对云存储中的对象或存储桶实现加密。这是推荐的选项。
在此下面，下一段指出，默认情况下，Google云存储在rest中加密数据：
使用云存储桶中内置的默认加密。GCP使用一个或多个加密机制加密存储在rest中的客户内容。顾名思义，这种加密在默认情况下是可用的，并且不需要您执行额外的操作。
对于不熟悉的人，为什么这里推荐应用层加密？如果存储对象的GCS存储桶受到IAM的保护，而GCS已经加密了该
浏览 0提问于2019-10-02得票数 2
1回答
在人工智能平台Google中从木星笔记本中访问BigQuery数据
google-bigquery、jupyter-notebook、gcp-ai-platform-notebook
我正在尝试访问BigQuery中存储的数据，这些数据来自谷歌云平台上AI平台上的朱庇特笔记本。首先，我尝试了以下代码：
from google.cloud import bigquery
from google.oauth2 import service_account
credentials = service_account.Credentials.from_service_account_file(r'\local_path\gcpcred.json')
project_id = 'my-bq'
client = bigquery.Client(cred
浏览 2提问于2021-05-05得票数 0
3回答
如何在大数据量的木星笔记本上建立机器学习模型？
python、machine-learning、google-bigquery、jupyter-notebook、bigdata
背景：
我在谷歌云BigQuery中拥有大量的数据(1500 of )。
我正在尝试构建一个ML模型，使用这些数据作为训练数据集。因此，我在木星笔记本中编写了下面的代码来获取数据集。
import pandas as pd
from google.cloud import bigquery
import os
os.environ['GOOGLE_APPLICATION_CREDENTIALS'] = './my_credential.json'
client = bigquery.Client()
sql = """
SE
浏览 0提问于2019-08-14得票数 0
1回答
将GCS存储桶中的.csv文件加载到云SQL表中：
google-bigquery、google-cloud-storage、google-cloud-sql
我正在尝试将整个表从BigQuery传输到Cloud SQL。在研究之后，我将表下载成csv格式的文件到GCS存储桶中。然后，我创建了一个Cloud SQL MySQL实例、一个数据库和一个与BigQuery表具有相同模式的表。 现在，我遵循此处的说明：https://cloud.google.com/sql/docs/mysql/import-export/importing将这些csv文件导入到Cloud SQL数据库中。 它适用于单个文件，但如果我尝试使用*，如gs:// bucket /fileprefix_*，我得到一个错误: error：(gcloud.sql.import.cs
浏览 16提问于2020-01-21得票数 2
1回答
google SQL云中的导入数据库问题
google-cloud-platform、google-cloud-sql
我已经使用谷歌云计算引擎在谷歌云平台上托管了我的wordpress网站。现在我想拆分我现有的wordpress数据库，并转移到Google SQL Cloud来提高我的网站性能。
我正在成功地在Google cloud SQL云上创建SQL实例。我引用了链接，但在上传我的wordpress数据库备份时出错。
在Google Cloud SQL上创建数据库后，当我单击导入按钮时，它需要几分钟时间并显示import failed : error 1031 (hy000) table storage engine for wp_wcfm_daily_analysis doesn't hav
浏览 3提问于2020-01-05得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频活动推荐
腾讯云开发者
