自动化Google AI notebook
自动化Google AI notebook
提问于 2021-04-15 11:31:39
如何使用google cloud scheduler触发google AI notebook中的函数，该函数将从google biquery中提取数据，处理这些数据并将其存储在google云存储中。我已经尝试过云函数，但它超时了，所以我正在探索委托VM实例并在其上运行笔记本的选项。感谢您的回复
回答 2
Stack Overflow用户
发布于 2021-05-06 17:46:46
在GCP中有一个管理笔记本资源的Notebooks API。
使用该方法可以创建、启动和触发notebooks的执行。我发现这可能对您部署notebook并自动与其交互以便执行您在第一条消息中提到的步骤有用。
Stack Overflow用户
发布于 2021-11-12 10:44:16
谷歌云现在有了“托管笔记本”，可以选择轻松地设置自动执行：quickstart-schedule-execution-console
然而，在写这篇文章的时候，它还没有完全起作用，所以我建议执行以下步骤：
- 使用Papermill设置Cloud Function以执行所需的笔记本和
- 设置Cloud Scheduler和Pub/Sub以运行函数
<代码>F210
其余的可以在Notebook脚本中处理：
# Query BigQuery:
df = bigquery.Client().query('SELECT * FROM your_table').to_dataframe()
# Upload to Cloud Storage:
bucket = storage.Client().get_bucket('YOUR_BUCKET')
blob = bucket.blob('YOUR_FILEPATH_IN_BUCKET.csv')
blob.upload_from_string(df.to_csv(index=False), 'text/csv')页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接：
https://stackoverflow.com/questions/67101883
复制相关文章
相似问题
腾讯云开发者
