腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
2
回答
生成python
scrapy
程序后,项中的类无法识别
python
、
scrapy
我试着根据一本书来构建一个简陋的
项目
。在使用'
scrapy
startproject tutorial/cd tutorial/
scrapy
genspider quotes quotes.toscrape.coom‘命令并添加解析函数和更改项后,详细代码如下:import
scrapy
class QuotesSpider(
scrapy
.Spider(url=url, c
浏览 0
提问于2018-10-01
得票数 0
4
回答
如何在Anaconda中使用
Scrapy
?
python
、
scrapy
、
anaconda
我已经安装了Anaconda,并且我已经将
Scrapy
安装为一个包。在Anaconda Navigator >Environment> roots中,
Scrapy
可以作为一个包找到。现在,我开始学习
Scrapy
教程(),并发现了以下说明:我可以知道,我应该在Anaconda Natvigator的哪里点击,以便我有一个“编译器”编写屏幕,让我输入代码? 谢谢!
浏览 5
提问于2017-07-27
得票数 5
1
回答
在windows上使用
scrapy
的Django
项目
python
、
django
、
windows
、
scrapy
我想开发一个使用
scrapy
的Django
项目
。我正在Windows上工作,并且知道
scrapy
应该使用Anaconda/conda安装在Windows上。然而,我不知道如何在我的Django
项目
中使用conda安装的
scrapy
。在Python shell中,import
scrapy
会引发一条错误消息。是否可以在Windows上使用Django+
scrapy
,或者我必须切换到
Linux
?
浏览 1
提问于2020-10-19
得票数 0
2
回答
Python:为2.7设置虚拟环境和
项目
python
、
python-2.7
、
python-3.x
、
scrapy
、
virtualenv
我的机器上有python 2.7和3.5,我可以根据我的
项目
在它们之间切换,但是当我试图为一个需要python 2.7的
项目
设置virtualenv时,它说此外,当我试图在刚刚
创建
的
scrapy
项目
中启动virtualenv
项目
时,它给出了使用模板目录的新
Scrapy
项目</e
浏览 3
提问于2017-05-21
得票数 1
回答已采纳
3
回答
如果同时安装了两个版本的python,如何让
scrapy
使用python 3?
python
、
scrapy
关于
scrapy
正在使用的python版本的快速问题。我在archlinux上从AUR存储库安装了
scrapy
,它默认使用python 2.7。
Scrapy
支持python 3.3+。
浏览 4
提问于2016-12-15
得票数 5
1
回答
刮壳响应204
web-scraping
、
scrapy
因此,我在终端中键入
scrapy
shell bina.az/items/所有,我得到以下内容: 这是因为云彩保护。我知道如何绕过云在刮刮
项目
,但我需要使用刮刮外壳also.How -我能解决这个问题吗?
浏览 2
提问于2018-12-01
得票数 2
回答已采纳
2
回答
Scrapy
1.1.0 -无活动
项目
python
、
python-2.7
、
pydev
我是Python的新手,在eclipse中使用PyDev成功安装了
Scrapy
。当我运行该程序时,它显示如下所示(如图所示)我正在运行这段代码: name = "dmoz
浏览 1
提问于2016-06-27
得票数 7
2
回答
如何为
Scrapy
配置默认shell的全局设置
scrapy
、
web-crawler
、
settings
我开始学习
Scrapy
,但在奇怪的情况下,我无法将默认shell设置为ipython。我的笔记本电脑的操作系统是Ubuntu15.10。我还安装了ipython和
scrapy
。根据
scrapy
的,我可以通过在全局配置文件中输入以下内容来更改默认的
scrapy
shell = ipython ~/.config/
sc
浏览 5
提问于2016-07-06
得票数 0
3
回答
如何像一个简单的脚本那样以编程的方式运行一个刮破的蜘蛛?
python
、
web-scraping
、
scrapy
现在,我可以在终端中通过这个命令运行:但是我想像一个简单的python脚本一样运行它。
浏览 14
提问于2017-12-13
得票数 9
回答已采纳
3
回答
启动新的
scrapy
项目
时出错
python
、
scrapy
我已经使用
Scrapy
网站上提供的Ubuntu包安装了
Scrapy
。但是在开始一个
Scrapy
项目
时我收到的错误消息是。Traceback (most recent call last): File "/usr/bin/
scrapy
", line 5, from pkg_resourcesimport load_entry_point
浏览 0
提问于2015-08-31
得票数 8
1
回答
不定域数
python
、
web-scraping
、
scrapy
、
screen-scraping
、
pymysql
但是,如何动态地
创建
scrapy
.Field()元素来处理这个问题呢?或者你不需要还是?为了简单起见,假设我是在刮随机人物的个人资料页。如何根据需要动态
创建
尽可能多的pet字段?name =
scrapy
.Field()height =
scrapy
.Field()# pet1 =
scrapy
.Field() # pet2 =
scrapy</em
浏览 0
提问于2018-07-25
得票数 0
1
回答
抓取405
scrapy
、
http-status-code-405
): yield
scrapy
.Request
浏览 17
提问于2019-03-22
得票数 0
3
回答
未知命令:爬网错误
python
、
scrapy
、
web-crawler
我按照教程的要求在我的机器上安装了
scrapy
。我已经
创建
了一个
项目
,demoz。但是当我输入
scrapy
crawl demoz时,它显示一个错误。当我在(C:\python27\scripts)下点击
scrapy
命令时,我遇到了这个东西,它显示:
Scrapy
0.14.2 - no activeproject
scrapy
<command> [optio
浏览 3
提问于2012-04-12
得票数 33
1
回答
Python
Scrapy
tutorial KeyError:‘找不到爬虫:
python
、
scrapy
我正在尝试编写我的第一个抓取蜘蛛,我一直在上的教程,但我得到一个错误"KeyError:‘蜘蛛找不到:“
scrapy
scrapy
.cfg(proscraper)#( 10/14/14@ 2:13pm )( tim@localhost ):~/Workspace/Development/hacks/prosum-scraper/
scrapy</em
浏览 2
提问于2014-10-14
得票数 6
回答已采纳
2
回答
ModuleNotFoundError:我的
项目
中文件夹结构问题?
python
、
scrapy
我刚开始使用
scrapy
和vscode,我的
项目
非常好,直到我决定在上传github之前整理文件夹。在那之后,整个
项目
就不再有效了。我很确定我搞砸了文件夹结构: ├── project1/ │ │ ├── spiders│ │ ├── middlewares.py │ │ └── settings.
浏览 5
提问于2022-05-14
得票数 -1
1
回答
无法启动Scrapyd
python
、
scrapy
当我想在一个
scrapy
项目
中启动scrapyd时。我得到了错误:我通过源包安装
scrapy
时,命令
scrapy
version -v会显示以下消息:lxml : 2.3.4.0Twisted : 12.0.0 Python : 2.7.3 (default, Jun3 2012, 12:07:40) - [GCC 4
浏览 1
提问于2012-09-28
得票数 0
3
回答
无需显式定义要抓取的每个字段即可抓取数据
python
、
scrapy
我希望抓取一页数据(使用Python
Scrapy
库),而不必在页面上定义每个单独的字段。相反,我希望使用元素的id作为字段名来动态生成字段。然后我意识到我需要将数据传递到
项目
中的管道,但我不能定义
项目
,因为我不知道它将需要哪些字段! 对我来说解决这个问题的最好方法是什么?
浏览 1
提问于2011-02-22
得票数 9
回答已采纳
4
回答
没有模块名为
scrapy
时,打开擦伤
项目
中的py魅力。
python
、
scrapy
、
pycharm
我已经生成了
Scrapy
项目
,但是当我在PyCharm中打开这个
项目
时 import
scrapy
name = "quotes" urls = [ 'http://quotes.toscrape.c
浏览 6
提问于2018-01-14
得票数 1
3
回答
如何重新启动venv
项目
python
、
python-3.x
、
scrapy
我是新来的
Scrapy
,我昨晚刚做完一个
项目
,我怎么能重新开始使用这个
项目
呢?我确实运行了source venv/scripts/activate,然后while启动了,但是当我运行
scrapy
crawl时,我得到了一个错误请帮忙,谢谢。
浏览 11
提问于2022-04-01
得票数 0
回答已采纳
1
回答
scrapyd deploy显示0个蜘蛛
python
、
scrapy
我正在为一个
项目
使用
scrapy
。我运行了以下命令来部署
项目
:然后我得到了下面的o/p:$cat
scrapy
.cfgurl = http://localhost:6800/ project = scrap
浏览 2
提问于2012-08-29
得票数 5
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
pycharm创建scrapy项目
新手爬虫之创建第一个完整的scrapy项目
CentOS 创始人创建新项目 Rocky Linux
在 Linux 中创建定时器|Linux 中国
创建linux后,首先创建登录用户,禁用root
热门
标签
更多标签
云服务器
即时通信 IM
ICP备案
对象存储
实时音视频
活动推荐
运营活动
广告
关闭
领券