导入我的scrapy脚本抛出无法在方法上导入

文章/答案/技术大牛

发布

1回答

python、import、scrapy

我正在思考如何导入当前保存为Scrapese.py的python类。import scrapy name = 'scrape-se' 'se1我一直在尝试典型的：但上面写着： ImportError: cannot import name

浏览 19提问于2017-01-08得票数 0

回答已采纳

2回答

从Python脚本中运行scrapy - CSV导出程序不起作用

python、python-2.7、export、twisted、scrapy

当我从命令行运行它时，我的刮取器工作得很好，但是当我试图在python脚本中运行它(使用使用Twisted的方法概述 )时，它不会输出它通常所做的两个CSV文件。我有一个创建和填充这些文件的管道，其中一个使用CsvItemExporter()，另一个使用writeCsvFile()。self.edges.append([item['url'],url,'Directed',self.num,&#

浏览 3提问于2013-07-20得票数 6

回答已采纳

4回答

VS代码无法识别Python虚拟环境包-它显示红色下划线

python、visual-studio-code

我安装了python虚拟环境。我使用vs代码。我在代码中导入了scrapy，vs代码无法识别该模块。实际上，当我运行它时，它工作得很好。scrapy crawl tester只是，vs代码显示红色下划线，这意味着“无法导入scrapy”，所以这只是vs代码问题，而不是venv或scrapy包安装问题。这段代码运行良好，实际上，scr

浏览 1提问于2020-02-12得票数 1

2回答

如何在python3下安装scrapy

python、python-3.x、scrapy、installation

我已经在cmd窗口中使用cmd.When导入scrapy先后安装了twisted，lxml，scrapy，它没有引发异常。我想知道有什么解决方案吗?提前谢谢。

浏览 26提问于2017-03-10得票数 0

1回答

为什么Scrapy不爬行/解析？

scrapy

这可能是一个重复的问题。我正在尝试运行一个Scrapy爬虫，但无法运行。为什么我得到错误信息"HtmlResponse没有属性urljoin"？如果request_count是3，response_count也是3，那么Scrapy统计数据意味着什么？我的代码在这里。在这件事上如果能有任何帮助，我将不胜感激。import scrapy from scrapy.h

浏览 2提问于2016-09-28得票数 0

1回答

从剧本上刮下来。不会导出数据

python-2.7、web、web-scraping、scrapy、twisted.internet

我试图从脚本中运行scrapy，但无法获得程序来创建导出文件。不是只有我一个人有这个问题。以下是其他两个类似的未回答问题。直到我发布了这个问题之后，我才注意到这些。下面是我</e

浏览 0提问于2014-12-19得票数 5

3回答

从scrapy.selector导入选择器错误

python、macos、web-scraping、scrapy、lxml

我无法执行以下操作：错误是：这就好像我的机器上没有安装LXML，但它确实安装了。另外，我认为这是<

浏览 0提问于2013-10-17得票数 5

回答已采纳

2回答

在scrapy中抓取大量静态html.gz文件

python、python-2.7、web-scraping、scrapy、gzip

我有一个抓取蜘蛛，它使用file:///命令作为开始url在磁盘上查找静态html文件，但我无法加载gzip文件并循环我的150,000个都有.html.gz后缀的文件目录，我已经尝试了几种不同的方法，我已经注释掉了，但到目前为止都不起作用，我的代码到目前为止看起来是这样的 from scrapy.spide

浏览 0提问于2017-03-14得票数 0

1回答

ImportError:无法导入名称ScrapyFileLogObserver

python、python-2.7、web-scraping、scrapy、scrapy-spider

我试着用ScrapyFileLogObserver测试刮伤日志。在我的源代码中，我正确地将包设置为：从scrapy.log导入ScrapyFileLogObserverImportError:无法导入名称ScrapyFile

浏览 0提问于2015-08-05得票数 3

回答已采纳

1回答

为什么我不能从scrapy项目外部导入python脚本？

python、scrapy、python-import

我知道这个问题已经问了很多次了，提供了一些解决方案(比解决方案更好的解决方案)，但是我不明白为什么我不能从一个刮刮的项目外部导入python脚本。我的意思是，对于任何其他python脚本，我能够通过提供良好的导入来完成它，但是在scrapy项目no中，我导入的每个脚本

浏览 1提问于2022-03-09得票数 0

2回答

我不能在终点站打开刮破的外壳

python、scrapy

我安装了刮痕成功地安装了它，我可以在我的脚本中导入它，并且它可以工作。但是，当我在Windows上与scrapy shell "https://www.google.com"一起使用Python3时，会出现以下错误：

浏览 1提问于2019-04-16得票数 1

回答已采纳

2回答

如何修复错误"ModuleNotFoundError:没有名为‘scrapy.contrib’的模块“

python、scrapy

当我试图运行我的项目时，我在scrapy控制台中得到了错误ModuleNotFoundError: No module named 'scrapy.contrib'。我注意到python linter在下面划线：这似乎是错误发生在那里。我该怎么解决这个问题呢？

浏览 1提问于2021-06-04得票数 0

2回答

scrapy版本0.22.1的多页抓取- "cannot import name CrawlSpider“错误是什么意思？

python、python-2.7、scrapy-spider

我正在尝试编写一个爬虫来跨多个页面爬行，通过以下网址：我正在使用Scrapy版本0.22.1来做这件事。但是，我收到一条"cannot import name CrawlSpider“消息。我已经粘贴了下面蜘蛛的代码。有人能确定我哪里出错了吗？from scrapy.spider import CrawlSpider, Rule from scrapy.linkextractors.sgml import SgmlLinkE

浏览 0提问于2015-02-14得票数 1

3回答

Scrapy:运行twisted.internet.error.ReactorNotRestartable的CrawlProcess()

python、scrapy、pycharm、twisted

我正试着用脚本来运行我的刮刮。我使用的是CrawlerProcess，我只有一只蜘蛛可以运行。我已经从这个错误中被困了一段时间了，我尝试了很多东西来改变设置，但是每次我运行这个蜘蛛，我就会我一直在寻找解决这个错误的方法，而且<em

浏览 9提问于2020-02-27得票数 3

回答已采纳

2回答

(Python)在导入的模块scrapy中找不到任何项目

python、directory、scrapy

我在此路径C:\Users\PATTY\Desktop\Project_Website\Scrapy上使用scrapy启动了一个项目import scrapy class QuotesSpider(scrapy.Spider

浏览 11提问于2017-03-02得票数 0

回答已采纳

1回答

如何在Mac OS X 10.7上安装Scrapy？(lxml错误)

macos、installation、lxml、scrapy

我完全是Python的新手，在MacOSX10.7上安装Scrapy时遇到了问题。我尝试了很多不同的方法，但总而言之，当我运行：我得到了以下错误： ImportError: dlopen(/Library/Python/2.7如果我用—without-cython选项运行相同的命令，我会得到：

浏览 2提问于2013-04-18得票数 0

回答已采纳

2回答

钢铁工人和擦伤

python、scrapy、iron.io

我正在尝试使用scrapy创建一个iron.io工作人员。当我试图通过python module/scrapy/__init__.py运行擦伤时，我得到了 Traceback (mos

浏览 6提问于2015-03-16得票数 1

回答已采纳

1回答

使用ENV SCRAPY_SETTINGS_MODULE的刮伤设置不起作用

python、scrapy

我想将我的设置分成production.py和local.py。不同的设置加载在不同的环境中，我在ENV变量SCRAPY_SETTINGS_MODULE中将其定义为project.local或project.production。问题是，每当我定义ENV并运行scrapy crawl myspider时，就会得到以下错误：如果我</em

浏览 0提问于2018-02-13得票数 1

1回答

如何使用Pyquery与刮伤？

python-2.7、scrapy、pyquery

我的目标是将pyquery与scrapy一起使用，显然，从scrapy.selector导入PyQuerySelector返回ImportError:无法在爬行蜘蛛时导入名称PyQuerySelector我遵循这个特定的gist 来实现pyquery。有什么建议或教程可以帮助我完成这项工作吗？

浏览 1提问于2014-01-21得票数 2

1回答

.Net核心控制台应用程序停止-使用Microsoft.PowerShell.SDK通过WinRM远程连接WebAppPool

c#、powershell、.net-core、winrm

我需要帮助来解决问题，以自动配对部署.Net核心web应用程序Api到服务器。正如您所知道的，如果您之前没有停止.dll，那么覆盖AppPool是不可能的，而在IIS中也没有解决方案。实际上，通过使用PowerShell，我可以执行一个脚本来做我需要的事情，该脚本如下所示：实际上我需要一个控制台应用程序来完成同样的工作，我发现我可以使用Micr

浏览 0提问于2020-04-06得票数 0

点击加载更多