我已经创建了一个web抓取python脚本,它在我的本地系统上运行良好,需要30分钟。
但是,当我试图将脚本放到GCP云功能上时,它在60004 ms之后抛出了超时。
2022-03-16T11:41:01.420461007Zget_training_databudock8slftb Function execution took 60004 ms, finished with status: 'timeout'
Function execution took 60004 ms, finished with status: 'timeout'
为了完成这个任务
我在google云上创建了一个服务器,并创建了一个用于测试我的API的迷你软件环境。但是做“部署到云运行”却没有。有一种方法可以在google云上现有的conda环境上执行dockerfile的部署吗?如果是,请告诉我在哪里可以找到教程或例子?
或者会是这样:
FROM python:3.8
USER myuser #an existing user
WORKDIR /home/myuser
RUN conda activate venv # an existing miniconda environment
ENV PATH="/home/myuser/.local/bin:
目前,这些是用来安排执行我所知道的Dataflow的任务的:
使用App服务或云函数。
- This [example](https://cloud.google.com/blog/products/gcp/scheduling-dataflow-pipelines-using-app-engine-cron-service-or-cloud-functions) is with Java, There are any official example with Python as simple?
- This [example](https://zablo.net/blog/po
Long Story
我正在准备安装监控软件代理的云init脚本(免责声明:我是MonitOwl的创始人之一)。代理软件收集信息(如内存或网络统计数据)并将其发送到服务器。每个公司集团都应该连接到自己的个性化服务器网址,如:https://customer_name.example.org。
云init脚本是一个从github下载代理、安装systemd服务和安装python需求的Content-Type: multipart/mixed;。目前,我们使用它的方式如下:
# ec2-run-instances --user-data-file <our_generated_file>