前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >Python笔记(一):安装+爬虫环境配置+打包为EXE文件

Python笔记(一):安装+爬虫环境配置+打包为EXE文件

作者头像
free赖权华
发布2018-04-27 14:50:51
1.2K0
发布2018-04-27 14:50:51
举报
文章被收录于专栏:赖权华的笔记赖权华的笔记

1、     安装

https://www.python.org/downloads/windows/ 到官网下载安装程序

Windows x86        32位操作系统

Windows x86-64       64位操作系统

web-based installer     基于网络的安装程序

executable installer     可执行的安装程序

embeddable zip file     python的压缩包

上面3个任意下载一个就行了,都是一样的东西。我是下载第2个

help file  帮助文档

安装时记得勾上 ADD…to path。

安装成功后在命令提示符中输入 PYTHON,如图显示版本号就是安装成功,不是可执行命令的话,在系统变量path 中加上PYTHON的安装路径

PYTHON比较重要的几个环境变量(不是必须,根据需要配置):

PYTHONPATH

PYTHONPATH是Python搜索路径,默认我们import的模块都会从PYTHONPATH里面寻找。

PYTHONSTARTUP

Python启动后,先寻找PYTHONSTARTUP环境变量,然后执行此变量指定的文件中的代码。

PYTHONCASEOK

加入PYTHONCASEOK的环境变量, 就会使python导入模块的时候不区分大小写.

PYTHONHOME

另一种模块搜索路径。它通常内嵌于的PYTHONSTARTUP或PYTHONPATH目录中,使得两个模块库更容易切换。

2、     爬虫环境配置

说明:Pip模块会自动安装,可以在命令提示符窗口输入PIP测试是否安装成功。(直接执行PIP报错的话,可以CD 到PYTHON安装目录的Scripts文件夹下执行,或者直接执行 python -m pip)

确定pip安装好后,执行以下命令

1、pip install beautifulsoup4 

2、到https://pypi.python.org/pypi/lxml/4.1.1    下载lxml库,记得下载适合自己操作系统和PYTHON版本的,比如我就是下载Windows64位+PYTHON3.6的

3、然后执行这个命令    pip install lxml的文件名及路径(例如:d:\xx.whl)

4、安装成功会提示 Successfully installed

3、     将脚本打包为EXE文件

(一)环境配置

1、 执行pip install pypiwin32

2、 执行 pip install pyinstaller

第二步如果安装不成功可以到http://www.pyinstaller.org/downloads.html下载安装包,然后执行

Python 解压后文件路径\setup.py install

(二)将源文件打包为EXE文件

pyinstaller -F -w 文件名及路径,成功后会提示存放位置。

-F:打包为单独的Exe文件 -w:不显示命令窗口

4、简单的爬虫程序和一个简单的GUI界面

代码语言:javascript
复制
import urllib
import re
from urllib import  request
import  tkinter as tk

def getHtml(url):
    page = urllib.request.urlopen(url)
    html = page.read()
    return html

def getImg(html):
    imgre = re.compile(r'src="(.+?\.jpg)"')
    html = html.decode('utf-8')  # python3
    imglist = re.findall(imgre,html)
    x = 0
    for imgurl in imglist:
        urllib.request.urlretrieve(imgurl,'%s.jpg' % x)
        x+=1
def start(url):
     html = getHtml(url)
     print(getImg(html))

x = tk.Tk()
label1 = tk.Label(x,text = "请输入网址:")
label1.grid(row=0,column=0)
label2 = tk.Label(x,text = "请输入文件存放路径:")
label2.grid(row=1,column=0)
var1 = tk.StringVar()
entry1 = tk.Entry(x,textvariable=var1)
entry1.grid(row=0,column=1)
entry2 = tk.Entry(x)
entry2.grid(row=1,column = 1)
def seturl():
      url="https://tieba.baidu.com/p/5475267611"
      # 本来想动态获取文本框输入的,不知道为什么WINDOWS10上运行返回值是NONE,
      # 另一台电脑WIN7却又可以,不知道是不是环境配置问题
      # print(var1.get())
      start(url)
cbbtn1 = tk.Checkbutton(x,text = "同意协议")
cbbtn1.grid(row = 2, column = 0)

btn1 = tk.Button(x,text = "开始抓取",command = seturl)
btn1.grid(row = 2,column = 2)
btn2 = tk.Button(x,text = "取消")
btn2.grid(row = 2,column = 3)

#img = tk.PhotoImage(file = "C:\Users\123456\Pictures\lovewallpaper\11.jpg")
#imgview = tk.Label(x,image = img)
#imgview.grid(row = 0,column = 2)
x.mainloop()
本文参与 腾讯云自媒体分享计划,分享自作者个人站点/博客。
原始发表:2018-01-07 ,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体分享计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档