无法将项目部署到Scrapy Cloud

文章/答案/技术大牛

发布

0回答

python-2.7、scrapy、scrapy-spider、scrapinghub

我对爬行器进行了更改，以使用scrapinghub API的一些方法，并尝试使用"shub deploy“将其重新部署到Scrapy Cloud。

浏览 3提问于2016-12-29得票数 0

1回答

如何向Scrapy Cloud提供API凭据而不公开提供凭据？

python、scrapy

我最困惑的地方是如何正确地向Scrapy Cloud和Scrapinghub提供API凭据，以便将解析后的项目发送到Google Cloud。我目前将我的脚本存储在Github上，并将其自动更新到Scrapy Cloud。这是为了使我的项目更容易更新，也是为了让其他人可以看到我的项目进度。我不相信我既可以手动上传JSON文件到Scrapy Cloud，又可以将我的项目</e

浏览 26提问于2018-09-07得票数 0

1回答

将Firebase功能、规则和索引部署到多个GCP项目

firebase、google-cloud-platform、google-cloud-build

我们正在尝试将Firebase功能、规则和索引部署到多个项目中，以实现数据的租户隔离。我们正在尝试使用Google Cloud Source Repository，但每个项目中的Cloud Build都无法连接到Central Project Source Repository -并且我们已在Cloud Build服务帐户上添加了所需的Source Repo IAM规则。从中央存储库部署Firebase功能、规则和索

浏览 2提问于2021-03-12得票数 1

1回答

如何在云中部署python scraper？

python、scripting、server、cron、cloud

我有一些python抓取器(脚本)，我想将它们部署到云中，以便使用某种调度器或cronjob不时地运行它们。问题是我不知道哪个平台可以为我托管刮板和它的输出。

浏览 1提问于2017-05-19得票数 1

1回答

无法通过托管在不同GCP项目中的App灵活环境通过unix套接字连接到Cloud

google-app-engine、google-cloud-platform、google-cloud-sql、app-engine-flexible

我有一个GCP项目运行Cloud和Django应用程序，在Google灵活的环境中，它工作得很好。但是，当我试图从另一个项目连接到同一个Cloud实例时，它无法工作，因为套接字不是按照cloud_sql_instances在app.yaml中指定的那样创建的：envhost=/cloudsql/myproject:myzone:mydbinstance 在项目A

浏览 0提问于2018-06-18得票数 1

4回答

使用scrapyd部署项目时出错

python、scrapy、scrapyd

之后，我打开了scrapy.cfg文件并取消了url行的注释。当我试图使用此命令部署项目时，scrapy deploy scrapyd -p default得到了以下错误===== dep

浏览 4提问于2012-07-06得票数 7

回答已采纳

1回答

无法导入Scrapy的设置模块或其scrapy.cfg

python、django、environment-variables、scrapy

例如，调用没有问题。现在，我想设置scrapyd web服务来部署我的蜘蛛。file to infer project data dir 因此，显然Scrapy无法找到scrapy.cfg文件，因为我没有在Scrapy项目中执行它。从我的Scrapy项目的顶层目录执行scrapy server将产生以下结果

浏览 7提问于2012-08-31得票数 10

1回答

如何将容器部署到多个GCP项目，并使用Cloud* Run托管？*

google-cloud-platform、google-cloud-run

我们需要在多个GCP项目中部署我们的应用程序，其中新项目由Terraform提供。我们在每个项目中都配置了Terraform配置的Cloud Build，但是当Cloud Build尝试访问我们集中式项目中的Source Repo时，我们会遇到问题。我们不希望克隆存储库，而是指示Cloud Build从中央存储库消费和部署。同样重要的是，我们让Cloud Build在部署新代码时更新每个项目

浏览 16提问于2021-03-04得票数 0

回答已采纳

3回答

未知命令:爬网错误

python、scrapy、web-crawler

我按照教程的要求在我的机器上安装了scrapy。我已经创建了一个项目，demoz。但是当我输入scrapy crawl demoz时，它显示一个错误。当我在(C:\python27\scripts)下点击scrapy命令时，我遇到了这个东西，它显示：Scrapy 0.14.2 - no activeproject scrapy <command> [options] [args

浏览 3提问于2012-04-12得票数 33

2回答

如何将非函数变更/ helper文件部署到云函数中？

firebase、google-cloud-firestore、google-cloud-functions

我们可以使用如下命令来部署特定的功能：这也将上传包含其他文件的文件夹我的问题是，如何在不部署功能的情况下只部署文件夹更改？我只想将这个文件夹更改部署到云函数中。我该怎么做？

浏览 2提问于2021-10-08得票数 0

2回答

调用部署在Google平台中的项目中的端点

spring-boot、google-cloud-platform、cron、google-cloud-shell、google-cloud-scheduler

我在Google平台上部署了一个Spring应用程序。它运行时没有任何错误，我可以使用GCP的Web特性调用项目中的其他端点。但是，我想做的是每天使用cronjob之类的方法调用这些端点之一。我尝试的是在GCP中创建一个，但是我无法找到发送请求的url。我迷失在GCP文档中，尝试了许多不同的方法，比如修改我的项目、创建云功能等等，这些都没有帮助。在我在GCP中部署的项目中，自动和定期调用端点的最简单方法是什么？

浏览 1提问于2020-07-19得票数 0

回答已采纳

1回答

无法将文件添加到Scrapy* Cloud并在ScrapyProxies的Settings.py中使用*

python、scrapy、web-crawler

我使用MANIFEST.in，我看到该文件被加载到添加到Scrapy Cloud的egg文件夹中。但我一直收到错误。这是我的项目：如果我直接在我的PC上运行它，它在settings.py上的一个文件proxylist.txt上运行得很好，但是一旦我把它加载到ScrapyCloud上，它就不能工作了。

浏览 0提问于2017-05-30得票数 1

4回答

如何从其他项目访问GCP云源库？

google-cloud-platform、google-cloud-build、google-cloud-repository

我有项目A和项目B。我使用项目A上的GCP Cloud Source Repository作为我的“源”远程。我使用Cloud Build，并触发对repo的'develop‘分支的更改，以触发构建。作为构建的一部分，我使用gcloud builder将一些东西部署到项目A中。现在，我想在项目B上运行相同的构建，可能是相同的分支，也可能是不同的分支(即'release-*')。最后，我

浏览 3提问于2019-11-18得票数 12

1回答

无法部署scrapy项目

python、scrapy、scrapyd

突然，我的scrapy部署开始失败了：Password:sudo scrapy deploy default -p eScraper Building egg of

浏览 0提问于2013-06-27得票数 2

回答已采纳

1回答

Azure ServiceDefinition vmsize

azure、azure-cloud-services

我们有一个调试测试环境，可以发布到使用多个服务配置文件(*.cscfg)，但是当我们进入生产部署时，我们希望根据我们的需求自动进行vmsize更改。这些需求是高级的，不需要动态的，只是部署到我们的测试开发环境和生产中，我们想要自动更改vmsize。谢谢。

浏览 1提问于2018-05-03得票数 1

回答已采纳

2回答

恢复到旧的Google Cloud* SDK shell版本*

eclipse、google-app-engine、gcloud

我正在尝试将一个Java项目从Eclipse部署到Google App Engine中，但被JSP阻止了。由于"'utf8‘编解码器无法解码字节“错误，JSP使我的应用程序无法部署。尝试发送与Google App Engine Tools for Eclipse (很快将被弃用)兼容的归档文件，但不会部署。我已经看到关于将Google Cloud Tools for Eclipse插件恢复

浏览 3提问于2017-07-28得票数 8

1回答

web服务器上的Firebase数据库，有多少个并发连接？

node.js、firebase、firebase-realtime-database、google-cloud-functions

它只从数据库中读取数据，并将其注入到网页中。不存在从数据库到客户端的数据传输。客户端仅显示来自服务器的网页。这种情况下使用了多少个连接？

浏览 8提问于2018-01-05得票数 0

回答已采纳

1回答

芹菜与花椒的差异

python、celery、scrapyd

我已经把它部署在飞毛腿上了，而且工作很好。实际上，Scrapyd和芹菜有什么区别？谢谢。

浏览 1提问于2015-01-14得票数 1

回答已采纳

1回答

从Visual Studio将.NET核心/Docker部署到Google Cloud* Kubernetes引擎*

docker、visual-studio-2017、kubernetes、.net-core、google-kubernetes-engine

我似乎无法使用VS的Google Cloud Tools扩展从VS 2017部署到Google Cloud Kubernetes引擎。部署进度达到75%左右，然后挂起几个小时，没有出现任何错误。当尝试使用Cloud Shell手动创建dotnet项目时，我收到一条错误消息，指出无法恢复dotnet包。运行dotnet restore命令不成功，但未给出错误消息。

浏览 0提问于2018-01-19得票数 0

1回答

浏览器打开IP地址，无法访问 ZenTao（白屏没有结果）？

tcp/ip

浏览 418提问于2021-08-24

点击加载更多