前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >Python爬虫实现验证码登录

Python爬虫实现验证码登录

作者头像
张凝可
发布2019-08-21 23:05:03
2.8K0
发布2019-08-21 23:05:03
举报
文章被收录于专栏:技术圈技术圈

版权声明:本文为博主原创文章,遵循 CC 4.0 by-sa 版权协议,转载请附上原文出处链接和本声明。

本文链接:https://blog.csdn.net/qq_27717921/article/details/53149065

很多网站为了避免被恶意访问,需要设置验证码登录,避免非人类的访问,Python爬虫实现验证码登录的原理则是先到登录页面将生成的验证码保存下来,然后人为输入后,包装后再POST给服务器,实现验证,这里还涉及到了Cookie,其实Cookie保存在本地主机上,避免用户重复输入用户名和密码,在连接服务器的时候将访问连接和Cookie组装起来POST给服务器。这里涉及到了两次向服务器POST,一次是Cookie,这里还自行设计想要Cookie的内容,由于是要登录,Cookie中存放的则是用户名和密码。第二次POST则是向服务器提交验证。

这里用到Python3,主要用到的包是re urllib.request http.cookiejar

上代码,借鉴了别人的代码~~~

代码语言:javascript
复制
import re
import urllib.request
import http.cookiejar
#from http.comkie import CookieJar  上面那句和这句等同

loginurl='https://www.douban.com/accounts/login'
cookie = http.cookiejar.CookieJar()
opener = urllib.request.build_opener(urllib.request.HTTPCookieProcessor)#在已存的Cookie下建立连接

params={}
params['form_email']='用户名'
params['form_password']='密码'#这里写上已有的用户名和密码
params['source']='http://www.douban.com/accounts/login'

#从首页提交登陆
response = opener.open(loginurl,urllib.parse.urlencode(params).encode('utf-8'))#urllib.parse.urlencode(params).encode('utf-8')这个是向服务
#器POST的内容,可以打印一下response.geturl()请求的连接看一下
#print(response.geturl()[0:33])
#验证成功跳转至登陆页
if response.geturl()[0:33]=='https://accounts.douban.com/login':
       html = response.read().decode('utf-8')
       #print(html),可以先打印一下文件内容,为了看到网页元素更方便的写正则,可以复制下来,在需要获取的地方用(.+?)表示,然后用group()元组来取得,
       #验证图片地址
       imgurl=re.search('<img id="captcha_image" src="(.+?)" alt="captcha" class="captcha_image"/>',html)
       if imgurl:
              url=imgurl.group(1)
              #print(url)
              #将验证码以v.jpg保存在本地,在输入验证码的时候可以手工输入
              res=urllib.request.urlretrieve(url,'v.jpg')
              captcha = re.search('<input type="hidden" name="captcha-id" value="(.+?)"/>',html)
              #print(captcha.group(1))
              if captcha:
                     vcode=input('请输入图片上的验证码:')
                     params["captcha-solution"] = vcode
                     params["captcha-id"] = captcha.group(1)#这个是动态生成的,需要从网页中获得
                     params["user_login"] = "登录"
                     #提交验证码验证
                     response = opener.open(loginurl,urllib.parse.urlencode(params).encode('utf-8'))
                     if response.geturl()=="https://www.douban.com/":
                            print("login sucess")
本文参与 腾讯云自媒体分享计划,分享自作者个人站点/博客。
原始发表:2016年11月13日,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体分享计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
相关产品与服务
验证码
腾讯云新一代行为验证码(Captcha),基于十道安全栅栏, 为网页、App、小程序开发者打造立体、全面的人机验证。最大程度保护注册登录、活动秒杀、点赞发帖、数据保护等各大场景下业务安全的同时,提供更精细化的用户体验。
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档