在GCP控制台上创建数据流作业期间提供参数时出错
在GCP（Google Cloud Platform）控制台上创建数据流作业期间提供参数时出错，可能是由于以下原因导致的：
- 参数错误：在提供参数时，可能输入了无效的或不支持的参数。首先，请确保所有参数都正确且符合要求。可以参考GCP文档中关于创建数据流作业的参数说明，以了解每个参数的正确格式和可接受值。
- 权限问题：可能是由于缺乏足够的权限而导致无法提供参数。请确保你有足够的权限来创建数据流作业并提供参数。可以检查你的GCP账号是否具有适当的角色和权限。
- 网络问题：在创建数据流作业期间，可能遇到了网络连接问题，导致无法成功传递参数。请确保你的网络连接正常，并且GCP服务可访问。
如果遇到了上述问题，你可以尝试以下解决方案：
- 仔细检查参数：仔细检查你提供的参数是否正确，并确保其格式和值符合要求。
- 验证权限：确保你的GCP账号具有创建数据流作业所需的权限。可以通过检查角色和权限设置来确认。
- 检查网络连接：确认你的网络连接正常，并且能够正常访问GCP服务。如果网络有问题，可以尝试重新连接或联系网络管理员。
如果你需要更多关于GCP数据流作业的信息，可以访问腾讯云的数据流产品页面，了解腾讯云提供的类似功能和服务。
腾讯云数据流产品链接：https://cloud.tencent.com/product/ds
相关·内容
1回答
从2021年10月5日起，我的GCP Dataflow模板文件将获取模板创建期间提供的参数值(当我在本地计算机上运行.py文件以便在GCP存储上创建模板文件时)，而不获取基于此模板文件的作业创建过程中提供的参数。如果我在模板创建过程中没有提供任何值，它们将采用RuntimeValueProvider (当不使用args的默认值时)，而不是在作业创建过程中提供的值。 创建作业期间提供的参数将存储在数据流作业会话中。如果我打开作业，转到右侧栏并打开"pipeline options"，这样在创建作业期间提供的正确值就在那里，但它们不会到达代码。 我在GCP控制台中以一种经典的方式
浏览 15提问于2021-10-11得票数 0
回答已采纳
2回答
您好，我已经创建了一个apache光束管道，测试了它，并从eclipse内部运行它，包括本地和使用数据流运行器。我可以在eclipse控制台中看到管道正在运行，我还可以看到详细信息，即控制台上的日志。
现在，我如何将此管道部署到GCP，以便无论我的机器处于什么状态，它都能继续工作。例如，如果我使用mvn compile exec:java运行它，控制台会显示它正在运行，但我无法使用dataflow UI找到作业。
另外，如果我在本地终止进程会发生什么，GCP基础设施上的作业也会停止吗？我如何知道作业已经被触发，而与我的机器在GCP基础设施上的状态无关？
带参数的maven编译exec:java
浏览 9提问于2018-01-08得票数 0
回答已采纳
我的GCP数据流作业立即失败，并显示以下错误消息： Workflow failed. Causes:
Subscription 'projects/project/subscriptions/subscription' not found.
Please supply an existing subscription. 订阅确实存在，我可以在数据流UI中单击它。我以前已经能够运行这个作业，并且它起作用了。只有当我尝试重新部署它时，它才会给出错误。 编辑:这就是我获取pubsub订阅的方式 pipeline
.apply(PubsubIO.readProtos(...)
.
浏览 27提问于2021-04-28得票数 1
回答已采纳
1回答
我在Google平台上使用Python中的Google实现。我的想法是使用来自AWS S3的输入。
(基于Apache )支持从S3读取文件。但是，我在文档中找不到将凭据传递给工作的最佳可能性。我尝试将AWS_ACCESS_KEY_ID和AWS_SECRET_ACCESS_KEY添加到setup.py文件中的环境变量中。但是，它在本地工作，但是当我将Cloud作业打包为模板并触发它在GCP上运行时，它有时工作，有时不工作，引发"NoCredentialsError“异常并导致作业失败。
是否有任何连贯的最佳实践解决方案将AWS凭据传递给GCP上的作业？
浏览 1提问于2020-07-24得票数 3
2回答
由于数据流作业不能删除，只能排空/取消，所以我的UI控制台上显示了很多取消的作业。 我可以让它们从我的控制台中消失吗？ 另外，由于作业无法删除，用户可以创建的数据流作业是否有最大限制，在此之后配额填满？
浏览 20提问于2019-10-18得票数 0
1回答
我计划在google云平台上启动一个数据流实例来运行一些实验。我想要熟悉并尝试使用apache store从BigQuery中拉取数据，运行一些ETL作业(在python中)和流式作业，最后将结果存储在BigQuery中。
然而，我也担心将我公司的GCP账单送到屋顶上。主要的成本考虑因素是什么，或者估计成本的方法是什么，所以我不会从我的老板那里听到抱怨。
如有任何帮助，将不胜感激，谢谢！
浏览 2提问于2019-08-24得票数 0
我有两个问题要问：
因此，我的公司有两个气流运行实例，一个在GCP配置集群上，另一个在AWS配置集群上。由于GCP有Composer，它可以帮助您管理气流，那么是否有一种方法可以将AWS集群中的气流DAG也由GCP管理呢？
对于批处理ETL/流作业(在python中)，GCP为此使用了Dataflow (Apache )。AWS相当于什么？
谢谢!
浏览 0提问于2019-08-24得票数 0
1回答
权限问题
、
这里是GCP的初学者。我正在测试GCP数据流，作为IOT项目的一部分，以便将数据从Pub/Sub转移到BigQuery。我从主题的页面“”按钮中创建了一个数据流作业。
除了无法删除数据流的问题外，我还遇到了以下问题：
一旦数据流开始，我就会得到错误：
工作流失败。原因:刷新您的凭据存在问题。请检查: 1.为您的项目启用了数据流API。2.确保数据流服务帐户和控制器服务帐户都具有足够的权限。如果未指定控制器服务帐户，请确保默认计算引擎服务帐户PROJECT_NUMBER-compute@developer.gserviceaccount.com存在并具有足够的权限。如果已删除默认Compute
浏览 2提问于2021-04-10得票数 0
2回答
我们目前正在使用Google的(1.6.0)在GCP中运行数据流作业，但是，我们正在考虑迁移到Apache (0.1.0)。我们仍将使用数据流服务在GCP中运行我们的作业。有没有人经历过这样的转变，有什么建议吗？这里是否存在兼容性问题，GCP是否鼓励这一举措？
浏览 2提问于2016-07-22得票数 5
回答已采纳
我有多个流作业运行在同一个项目中，而且GCP计费页面不是很细--我想把每个作业的内容分解出来。有办法这样做吗？
浏览 4提问于2017-06-29得票数 1
回答已采纳
我已经创建了一个标准的PubSub到BigQuery数据流。然而，为了确保我不会在离线时增加巨额费用，我取消了数据流。在GCP控制台中，似乎没有重新启动它的选项--这是通过控制台还是通过shell (如果是，如何实现的)进行的吗？
浏览 11提问于2018-01-03得票数 12
回答已采纳
我尝试运行数据流管道，从本地机器(Windows)读取数据，并使用DirectPipelineRunner将数据写入谷歌云存储。作业失败，错误如下:指定FileNotFoundException(因此我认为数据流作业无法读取我的位置)。我从本地计算机运行该作业，以运行我创建的基于GCP的模板。我可以在GCP Dataflow仪表板中看到它，但失败并显示以下错误。请帮帮忙。我也尝试了我的本地机器的IP或主机名以及我的本地位置，但面对这个FileNotFoundException？
错误：
java.io.FileNotFoundException: No files matched spec:
浏览 4提问于2018-08-10得票数 1
我通过以下命令启用了日志API：
gcloud services enable logging
我遵循了以下步骤:创建管道的。
我使用slf4j记录器库记录作业。但是，在GCP数据流控制台中看不到任何日志。
浏览 3提问于2022-10-07得票数 1
回答已采纳
3回答
我事先很抱歉问了这个问题。这一定是一件很愚蠢的事，我忽略了。我是GCP的初学者。当我尝试使用GUI和模板创建一个作业时，我会得到以下错误：
我去了IAM，确认我已经是这个项目的所有者了。有人能指点我吗？
谢谢
浏览 0提问于2018-05-06得票数 0
根据，可以在GCP上的屏蔽VM中运行云数据流作业。
对于非模板作业，如中所述，可以通过提交--dataflowServiceOptions=enable_secure_boot标志实现，如下所示：
mvn -Pdataflow-runner compile exec:java -Dexec.mainClass=org.apache.beam.examples.WordCount -Djava.util.logging.config.file=logging.properties -Dexec.args="--project=${PROJECT_ID} \
--gcpTempLocati
浏览 13提问于2022-03-23得票数 1
回答已采纳
1回答
我需要使用服务帐户执行数据流作业，我遵循的是在同一平台中提供的一个非常简单和基本的示例字数。
奇怪的是我得到了一个错误：
根据这一点，GCP需要拥有数据流工作者权限的服务帐户才能执行我的作业。即使我已经设置了所需的权限，当错误仍然出现时，weir部分就会出现：
有人能解释这种奇怪的行为吗？非常感谢
浏览 2提问于2020-02-02得票数 0
我正在寻找流GCP数据流作业的编排软件-可以提供警报，状态，作业启动等类似于在Kubernetes上所做的事情。答案建议使用Airflow，因为他们有一些钩子连接到GCP -这将是很好的，因为我们有一些其他的基础设施在Airflow上运行。然而，我不确定这是否能够处理流式作业-我的理解是，Airflow是为将要完成的任务而设计的，而流式作业不是这样的。气流对此合适吗？或者我应该使用不同的软件？
浏览 0提问于2017-06-20得票数 4
我正在尝试使用谷歌提供的模板PubSub to BigQuery设置一个数据流作业。然而，我在启动时得到了这个错误：
Message: The resource 'projects/my-project/global/networks/default' was not found
我认为谷歌提供的模板是硬编码的，可以使用default网络。如果我在自动模式下创建default网络，该错误就会消失。但我们不能在生产中使用default网络。
文档提到了一个network参数。我尝试从GCP console UI添加一个名为network的附加参数，传入我们的自定义网络名称。但是我
浏览 12提问于2018-02-01得票数 1
回答已采纳
我在GCP上的数据流作业(2019-05-07_06_51_21-705453987744722209)在过去的18小时内一直停留在状态“正在更新”中。作为此作业更新的作业已在相同时间内处于未启动状态(2019-05-07_07_48_56-11394590249055546323)。我不能取消或耗尽这两项工作。 我不能通过控制台取消，因为没有这样做的选项。我试着从命令行执行(gcloud dataflow作业取消，等等)但得到的回应是： 无法取消作业2019-05-07_06_51_21-705453987744722209：(9d2be4fd48bdc9f)：工作流修改失败。原因：(ed
浏览 12提问于2019-05-08得票数 1
我试图在GCP DataFusion中创建复制作业，以便在oracle与Bigquery之间进行连接。我可以从数据库中获取记录，但在最后一步获得以下错误。我有GCP的所有权限。我在这里错过了什么。请帮帮忙
问题:我们缺少从源读取所需的权限。向用于连接数据库的用户帐户授予适当的权限，然后再试一次。在验证给定的Oracle用户是否具有客户数据库中所需的特权时发现。
浏览 7提问于2022-06-01得票数 0
1回答
目前，我们要求通过气流在Dataproc上运行火花作业。
我们能够通过气流在Dataproc上运行Spark，并能够在GCP控制台上检查日志。
但是想知道是否有一种方法可以从气流中获取Dataproc作业id并将Dataproc作业日志下载到GCS桶中？
浏览 5提问于2022-03-09得票数 2
在google商店控制台上传构建时出错。错误如下。
泄露的GCP密钥--您的应用程序包含公开的(GCP) API密钥。
罪魁祸首代码如下。
Places.initialize(getApplicationContext(), BuildConfig.GOOGLE_API_KEY);
根据文档，我正在读取来自BuildConfig的密钥，并限制密钥。但问题仍然是一样的。我该如何解决这个问题..。
浏览 44提问于2022-02-16得票数 8
2回答
我有一个使用directrunner在本地成功运行的Beam应用程序，它提供了我在本地控制台上代码中的所有日志信息。但是，当我尝试在google数据流环境中运行它时，我只在本地控制台上看到这些日志信息，但是它们没有出现在Google控制台上，用于数据流作业，也没有出现在他们的StackDriver日志记录页面中。
下面是我在本地控制台运行数据流运行程序代码时所做的工作：
mvn compile exec:java -Dexec.mainClass= ... \
-Dexec.args=... " \
浏览 1提问于2017-09-16得票数 7
回答已采纳
1回答
由于有了DataflowJavaOperator，我正在使用气流1.9在Google平台上发布一个Dataflow。
下面，用于从气流Dag启动数据流的代码：
df_dispatch_data = DataFlowJavaOperator(
task_id='df-dispatch-data', # Equivalent to JobName
jar="/path/of/my/dataflow/jar",
gcp_conn_id="my_connection_id",
dataflow_default_optio
浏览 0提问于2018-03-07得票数 2
回答已采纳
我创建了一个Dataflow模板，它允许我将数据从Cloud中的CSV文件导入到BigQuery中。我每天都使用云函数Firebase从这个模板创建工作。这是函数中的代码(删除了一些不相关的部分)。
const filePath = object.name?.replace(".csv", "");
// Exit function if file changes are in temporary or staging folder
if (
filePath?.includes("staging") |
浏览 7提问于2020-04-16得票数 1
回答已采纳
我有一个批处理作业在数据流运行器上的版本apache-beamgcp==2.19.0下的gcp上的数据流中运行。我为该作业创建了一个自定义模板。作业按预期运行，但我还想添加一个最大作业持续时间。I found the duration (in milliseconds) parameter inside the wait_until_finish() method，which should be available.问题是:如何让模板化的批处理作业在运行时间超过持续时间时自动停止？我不需要保留任何数据，我只想让作业在运行时间过长时停止。我已经实现了run函数，如下所示： def run():
浏览 22提问于2020-08-13得票数 0
我正在GCP上实现一个云数据流作业，需要处理2个GCP项目。输入和输出都是Bigquery分区表。我现在遇到的问题是，我必须从项目A中读取数据并将其写入项目B。
我没有看到任何与跨项目服务帐户相关的内容，我也不能给Dataflow两个不同的凭证密钥，这有点烦人吗？我不知道其他人是否经历过这种架构，或者你是如何处理的。
浏览 6提问于2020-05-08得票数 0
回答已采纳
我创建了一个google流作业，从PubSub读取并插入到BigQuery中。我使用JSON将STREAMING_INSERT数据插入到BiqQuery表中。我正面临插入问题，说明请求的大小超过了10 Mb的允许限制。数据流错误如下所示。根据我的理解，每个记录的大小是1-2Mb，根据我的理解，数据流作业将流数据插入到微批处理中，这导致了这一错误。
你能不能给我一些解决办法。
来自worker的错误消息: java.lang.RuntimeException:我们观察到一行大小为24625273字节。BigQuery支持高达10 is的请求大小，这一行太大了。您可以更改重试策略，以取消阻塞该管
浏览 6提问于2022-10-13得票数 0
回答已采纳
1回答
我想在GCP上的项目上部署服务(使用Apache光束的python脚本)，执行时间有时长达24小时。我需要这个服务与数据管道始终工作。此外，我还有一个web应用程序，它将使用来自数据管道的结果。我的解决方案是，我在GCP app Engine上部署web应用程序，在K8s集群上部署python脚本，因为作业可以持续24小时，而且App Engine是无服务器的，所以serverless中的所有东西都应该是短时间的作业，比如15分钟。我的想法是否正确，或者您是否有其他更好的解决方案可供GCP服务参考。
浏览 9提问于2021-01-10得票数 0
回答已采纳
我在GCE控制台中看到Dataflow为我的作业创建的GCE实例。如果我删除它们会发生什么？
浏览 0提问于2016-05-25得票数 1
在运行PySpark作业足够长的时间后，我会遇到“任务租赁过期”的错误；然后我尝试重新提交作业，它会给出“”，而日志字段是空的。
原因是什么，或者我应该如何诊断这个问题？
一个主节点:n1-标准-4(4个vCPUs，15 GB内存)
4个工作节点:N1-标准-1 (1 vCPU，3.75GB内存)
编辑：
在GCP控制台上，集群似乎是健康的，但它不再“获得”任何作业。我必须重新创建新的集群来运行相同的任务，到目前为止，这似乎还可以。
浏览 2提问于2017-10-27得票数 2
我正在尝试在GCP数据流中运行批处理作业。作业本身有时会占用大量内存。目前，作业一直在崩溃，因为我相信每个worker都在尝试同时运行pcollection的多个元素。有没有办法防止每个工作者同时运行多个元素？
浏览 2提问于2021-08-26得票数 0
下面的Airflow DAG(Cloud Composer)被消息卡住：
{base_task_runner.py:113} INFO - Job 5865: Subtask my_task
{gcp_dataflow_hook.py:121} INFO - Running command /home/airflow/gcs/dags/dataflow/pyfile.py --runner DataflowRunner......"
我在数据流中看不到提交的作业。你知道这里缺少什么吗？
task1 = DataFlowPythonOperator(
task_id = 'my
浏览 0提问于2020-12-29得票数 0
1回答
我们有多个作业(用Java /Kotlin编写)，它们可以以两种不同的方式运行：
从用户的Google帐户启动
从服务帐户启动(具有所需的策略和权限)
当从用户帐户运行数据流作业时，Dataflow向员工提供。它不向工人提供授权用户。
当从服务帐户运行Dataflow作业时，我设想使用设置的服务帐户将被传播到Dataflow在后台使用的辅助VM。没有提到任何这一点，但是他们确实提到了凭据用于对GCP服务进行身份验证。
在我们的大多数Dataflow用例中，我们在项目A中运行Dataflow作业，而在项目B中从BigQuery中读取数据流作业。因此，我们为用户提供对项目B中的Bi
浏览 0提问于2018-12-05得票数 3
是否可以使用GCP中的云运行或每30分钟运行一次数据流的任何其他方式调用数据流。如果有人分享执行程序的参考材料，我将不胜感激。
浏览 11提问于2022-11-05得票数 0
2回答
我正在尝试使用同步拉API来使用Google PubSub消息。这可以在IO连接器库中获得。我想使用KafkaIO将使用的消息写到Kafka。我想使用FlinkRunner来执行作业，因为我们在GCP之外运行这个应用程序。
我面临的问题是，在GCP PubSub中，所消耗的消息没有得到ACK。我已经确认本地Kafka实例具有从GCP PubSub中使用的消息。GCP DataFlow中的文档表明，当管道被一个数据接收器终止时，数据包就会完成，在我的例子中，这就是Kafka。
但是，由于代码在Apache中运行，而不是在GCP DataFlow中运行，所以我认为某些类型的回调与ACK‘in提交的
浏览 3提问于2020-11-08得票数 0
回答已采纳
我在大约43分钟前启动了13个数据流作业，它们都处于“未启动”状态。stacktracer或GCP日志记录中没有日志。Another answer on stack overflow让谷歌解决了他们这一端的问题。 我已经尝试了我能找到的所有其他答案。 我的数据流api已启用(2天前我正在运行作业，没有任何问题，没有任何变化)。没有要检查的日志，所以这是个死胡同。我检查了我的配额，没有一个是节流的。 任何来自谷歌或有其他想法的人的帮助都将非常感谢！
浏览 15提问于2019-06-27得票数 0
例如，当尝试使用任何#要求命令时：
#Requires -Version 3.0
它们在文本中出错：
创建管道时出错。+ CategoryInfo : NotSpecified：(:) []，ParentContainsErrorRecordException + FullyQualifiedErrorId : RuntimeException
我在ISE和控制台上测试了这个结果，结果相同，我的版本如下：
名称值- PSVersion 5.1.14409.1012 PSEdition桌面PSCompatibleVersions {1.0，2.0，3.0，BuildVersion 1
浏览 1提问于2018-05-22得票数 0
回答已采纳
我正在尝试使用GCP Memorystore处理在GCP数据流上运行的事件流作业的会话ids。尝试连接到Memorystore时，作业失败并出现超时：
redis.clients.jedis.exceptions.JedisConnectionException: Failed connecting to host 10.0.0.4:6379
at redis.clients.jedis.Connection.connect(Connection.java:207)
at redis.clients.jedis.BinaryClient.connect(BinaryClient
浏览 31提问于2019-07-16得票数 2
回答已采纳
启动dataflow.projects.locations.templates.launch(i ()函数(我也测试了"now()“函数)生成的列在作业执行期间似乎没有被求值。报告的日期始终以第一次创建模板的日期填充。
这是一个正确的行为吗？为什么没有使用作业启动日期填充该列？
浏览 1提问于2018-09-25得票数 0
1回答
我正在开发一条管道，它接收数据并对其进行分区，我试图将一些数据加载到gcp上的bq表中，但我得到了Too many partitions produced by query, allowed 4000, query produces at least 10000 partitions，我知道这是bq的一个限制，并且已经找到了多个有目的的解决方案，可以在数据或分区上创建一个集群，而不是每天，问题是我对数据本身没有可见性，我不能这样做。如果还有其他的想法，请帮忙。
此外，为了调查和分析，如何知道提交了多少个大型查询作业？是否有办法获得特定数据流提交的bq作业数量？
谢谢
浏览 14提问于2022-03-09得票数 0
这是我正在使用的地形。
provider "google" {
credentials = "${file("${var.credentials}")}"
project = "${var.gcp_project}"
region = "${var.region}"
}
resource "google_dataflow_job" "big_data_job" {
#name = "${v
浏览 1提问于2018-05-16得票数 1
我有python脚本，它在指定的GCS路径中创建数据流模板。我已经测试了脚本使用我的GCP免费试用，它的工作完美。我的问题是在生产环境中使用相同的代码，我想生成一个模板，但我不能使用Cloud，因为有限制，也不能直接运行Python脚本，即使用SA键。另外，我不能创建VM并使用它在GCS中生成一个模板。考虑到上述限制，是否有任何选项可以生成数据流模板。
浏览 14提问于2022-02-20得票数 0
回答已采纳
当我的数据流作业试图访问一个秘密时，它会失败：
“线程中的异常”com.google.api.gax.rpc.PermissionDeniedException: io.grpc.StatusRuntimeException: PERMISSION_DENIED:对资源'projects/REDACTED/secrets/REDACTED/versions/latest‘(或者它可能不存在)拒绝的权限'secretmanager.versions.access’。
我使用gcloud dataflow flex-template run启动这项工作。我可以在控制台上查看
浏览 4提问于2021-02-06得票数 1
回答已采纳
1回答
我正在尝试运行数据流作业，具有以下setup.py文件： import setuptools
setuptools.setup(
name='Some-Name',
version='0.0.1',
install_requires=[
'apache-beam==2.10.0',
'tensorflow-transform==0.12.0'
浏览 12提问于2019-03-18得票数 1
我试图通过API创建一个Dialogflow代理，它需要一个GCP项目，也必须通过API创建。
实际上，当最终用户已经进入GCP控制台并接受新的条款和服务时，两者都工作得很好。
问题是，我希望在没有最终用户的情况下创建代理，以便在Google Cloud平台上执行任何操作。
在此之前，谷歌似乎为用户首次登录时弹出的GCP控制台上的API添加了新的服务条款。
我的问题是，您认为是否有可能通过Oauth或任何其他可能性接受这些服务条款？
似乎Dialogflow仍然做得很好..所以这应该是可能的:p
泰。
浏览 14提问于2020-02-12得票数 0
HTTP云调度器作业无法触发云运行端点。创建了一个服务帐户，并提供了云调度程序和云运行管理角色。在云运行权限选项卡上，帐户被授予云运行调用器权限。云运行端点可以在控制台上触发并成功返回。如果不需要身份验证，则将创建云调度器作业，并且当云运行发送请求时，云运行将返回403 HTTP响应。使用的命令是
gcloud beta scheduler jobs create http *job_name* --schedule="* * * * *" --uri="https://*cloud-run-app-name-*cno4ptsl2q-ew.a.run.app"
浏览 2提问于2020-12-17得票数 1
2回答
如何指定GCP的数据流的IP号？
、、、、
在AWS的RDS中，我通过连接MariaDB来使用数据流。最近，我们对MariaDB的安全策略进行了更新，只有特定的ip范围才能访问它。我在AWS RDS安全策略中注册了GCP的默认VPC范围。但是，它不能从GCP的数据流访问到具有默认VPC ip范围的AWS RDS。
可以指定GCP的数据流的IP号吗？
'2.25.0'(beam-runners-google-cloud-dataflow-java)是apache.beam的版本
浏览 19提问于2022-05-02得票数 0
回答已采纳
我们正在试图弄清楚如何在GCP中托管和运行许多现有的scikit-learn和R模型(按原样)。似乎ML引擎是Tensorflow的专用引擎。如果数据集太大而无法放入datalab，我如何在Google云平台上训练scikit-learn模型并管理我的模型？我仍然可以使用ML Engine吗?或者大多数人是否采取了不同的方法？
作为更新，我能够通过将其作为训练作业提交给ML引擎来获得训练scikit-learn模型运行的python脚本，但是还没有找到托管酸洗模型或将其用于预测的方法。
浏览 1提问于2017-04-21得票数 2
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM活动推荐
腾讯云开发者
