首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >Python分布式爬虫实战(二) - 搭建 Mac 开发环境

Python分布式爬虫实战(二) - 搭建 Mac 开发环境

原创
作者头像
JavaEdge
发布2019-03-20 16:13:56
7100
发布2019-03-20 16:13:56
举报
文章被收录于专栏:JavaEdgeJavaEdge

0 环境及版本

系统

  • Mac OS
    IDEPyCharm 2018.3.5数据库
  • MySQL 5.7
    Redis, elasticsearch开发环境virtualenv

1 Pycharm的安装及简单使用

下载 PyCharm

设置快捷键

设置解释器

2 MySQL和Navicat的安装和使用

2.1 MySQL

下载与安装

2.2 Navicat

3 Python安装

推荐py3.5+版本

4 virtualenv和virtualenvwrapper安装和配置

4.1 virtualenv简介

每个应用可能需要各自拥有一套独立的Python运行环境。virtualenv就是用来为一个应用创建一套隔离的Python运行环境。

优点

  • 使不同应用开发环境独立
  • 环境升级不影响其他应用,也不会影响全局的python环境
  • 防止系统中出现包管理混乱和版本的冲突

它是将全局Python解释器进行私有化复制

如果不使用虚拟环境,默认的pip安装都会安装到同一个目录(java是把自己需要的包放到自己项目目录),不同项目使用起来会产生问题

安装

pip install virtualenv

查看 virtualenv

4.2 virtualenvwrapper 简介

virtualenv的扩展管理包,用于更方便管理虚拟环境

优点

  • 将所有虚拟环境整合在一个目录下
  • 管理(新增,删除,复制)虚拟环境
  • 切换虚拟环境

安装

pip install virtualenvwrapper
pip install virtualenvwrapper
  • 查询安装路径
    which virtualenvwrapper.sh
    which virtualenvwrapper.sh
  • 修改.bash_profile
    vim /Users/sss/.bash_profile
    vim /Users/sss/.bash_profile

在最后加入:

export WORKON_HOME=$HOME/.virtualenvs
export VIRTUALENVWRAPPER_SCRIPT=/Library/Frameworks/Python.framework/Versions/2.7/bin/virtualenvwrapper.sh
export VIRTUALENVWRAPPER_PYTHON=/Library/Frameworks/Python.framework/Versions/2.7/bin/python2
export VIRTUALENVWRAPPER_VIRTUALENV=/Library/Frameworks/Python.framework/Versions/2.7/bin/virtualenv
export VIRTUALENVWRAPPER_VIRTUALENV_ARGS='--no-site-packages'
source /Library/Frameworks/Python.framework/Versions/2.7/bin/virtualenvwrapper.sh
  • 立即生效
    source ~/.bash_profile
    source ~/.bash_profile
  • 到其工作目录
    cd ~/.virtualenvs ls
    cd ~/.virtualenvs ls
  • 查看当前系统py版本
    为py2.7
  • 现在,希望创建py3的环境
  • 查询py3位置
    which python3
    which python3
  • 创建py3环境
    mkvirtualenv --python=/Library/Frameworks/Python.framework/Versions/3.7/bin/python3 py3scrapy
    mkvirtualenv --python=/Library/Frameworks/Python.framework/Versions/3.7/bin/python3 py3scrapy
  • 查看python版本

其他常用的命令:

$ workon                显示所有的环境名称
$ workon 环境名          进入/切换到该环境
  • deactivate 返回到系统环境
    $ rmvirtualenv 移除环境

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

原创声明:本文系作者授权腾讯云开发者社区发表,未经许可,不得转载。

如有侵权,请联系 cloudcommunity@tencent.com 删除。

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
目录
  • 0 环境及版本
    • 系统
    • 1 Pycharm的安装及简单使用
      • 设置快捷键
        • 设置解释器
        • 2 MySQL和Navicat的安装和使用
          • 2.1 MySQL
            • 2.2 Navicat
            • 3 Python安装
            • 4 virtualenv和virtualenvwrapper安装和配置
              • 4.1 virtualenv简介
                • 优点
                • 安装
                • 查看 virtualenv
              • 4.2 virtualenvwrapper 简介
                • 优点
                • 安装
                • 其他常用的命令:
            相关产品与服务
            云数据库 SQL Server
            腾讯云数据库 SQL Server (TencentDB for SQL Server)是业界最常用的商用数据库之一,对基于 Windows 架构的应用程序具有完美的支持。TencentDB for SQL Server 拥有微软正版授权,可持续为用户提供最新的功能,避免未授权使用软件的风险。具有即开即用、稳定可靠、安全运行、弹性扩缩等特点。
            领券
            问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档