前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >Scrapy:安装方法

Scrapy:安装方法

作者头像
新码农
修改2020-12-25 11:31:37
1.2K0
修改2020-12-25 11:31:37
举报
文章被收录于专栏:新码农博客新码农博客

导读

总结scrapy在不同平台的安装方法。

1、Ubuntu 16.04

1.安装Scrapy依赖库

代码语言:txt
复制
sudo apt-get install python3.6-dev
sudo apt-get install libevent-dev
sudo apt-get install libssl-dev

2.scarpy需求lxml,OpenSSL,Twisted库一般系统自带,也可用以下方法安装:

代码语言:txt
复制
sudo pip install lxml
sudo pip install pyOpenSSL
sudo pip install Twisted

3.安装Scrapy

代码语言:txt
复制
sudo pip install scrapy

2、Windows

1.更新pip

代码语言:txt
复制
python -m pip install --upgrade pip

2.安装wheel

代码语言:txt
复制
pip install wheel

3.安装lxml

代码语言:txt
复制
pip intsall lxml

4.安装Twisted

下载地址

  • 下载Twisted-18.9.0-cp36-cp36m-win_amd64.whl(对应python和软件版本)
  • 进入文件所在目录
  • 安装
代码语言:txt
复制
pip install Twisted-18.9.0-cp36-cp36m-win_amd64.whl

5.安装pywin32

方法一、离线包

下载地址

  • 下载pywin32-224-cp36-cp36m-win_amd64.whl(对应python和软件版本)
  • 进入文件所在目录
  • 安装
代码语言:txt
复制
pip install pywin32-224-cp36-cp36m-win_amd64.whl

方法二、在线

通过PIP指向此软件包pypiwin32,从PYPI安装pywin32

代码语言:txt
复制
python -m pip install pypiwin32
# python -m意思是将库中的python模块用作脚本去运行

6.安装scrapy

代码语言:txt
复制
pip install scrapy
本文参与 腾讯云自媒体分享计划,分享自作者个人站点/博客。
原始发表:2020年4月16日 ,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体分享计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 导读
    • 1、Ubuntu 16.04
      • 2、Windows
      领券
      问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档