专栏首页JAVAandPython君一起看看Python之Requests库

一起看看Python之Requests库

1

/ 写在前面的话 /

今天资源君带大家来看看Python的Requests库,这个库是基于urllib3所建立的,而且被人们称为人性化的库,因为它的代码量相比于urllib中的request少了一些,并且很容易上手。下面一起来看看!

2

/ Requests/

1.导入requests库:

import requests

2.我们首先来讲讲requests库里面的两种get请求方法:

-第一种:

# 使用get请求,
rsp = requests.get(url)

-第二种:

# 使用request请求
rsp1 = requests.request("get", url)

当然传入的参数不仅仅只是url,还有params以一个字符串字典来提供这些参数,将字典中的参数发送到指定网页,另外跟request一样可以设置headers:

url = "http://www.baidu.com/s?"
kw = {
    'wd': '熊猫'
}
headers = {
    'User-Agent':
        'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36'
}
# 使用get请求,
rsp = requests.get(url, params=kw, headers=headers)

3.我们还可以通过requests读取服务器响应的内容

r = requests.get('https://api.github.com/events')
print(r.text)

打印内容,这里有服务器返回的各种各样的参数(由于返回结果太多就不写出来了)

4.再来讲讲requests的post

rsp = requests.post(url, data=data)

直接把想要post的数据放入一个字典中data,然后直接传参就行了,这里非常的简洁

5.再来讲讲requests里的Cookie

-如果某个响应中包含一些 cookie,你可以快速访问它们,返回的是一个cookiejar:

r = requests.get('https://api.github.com/events')
cookiejar = r.cookies
#可以将cookiejar转化成字典格式
cookiedict =     requests.utils.dict_from_cookiejar(cookiejar)

-要想发送你的cookies到服务器,可以使用 cookies 参数:

r = requests.get(url, cookies=cookies)

cookie是一个字典格式,直接传参发送

6.requests中的session

-模拟一次会话,从客户端链接服务器开始到客户端浏览器断开

-当我们跨请求时保持一些参数,比如在同一个session实例发出的所有请求之间保持cookie

# 创建session对象,可以保持cookie值
ss = requests.session()

headers = {'User-Agent':'xxxxxxxxxxxxxx'}

data = {'name' : 'xxx'}

# 此时由创建的session对象来管理发出请求
ss.post("http://www.baidu.com", data=data, headers=headers)

rs = ss.get('xxxxxxxxxx')

7.requests中的代理proxy

proxy = {'http':'你的代理ip', 'https':'你的代理ip'}

rsp = requests.request('get','http://www.baidu.com', proxies=proxy)

-如果你的代理ip是买的,可能会有用户验证,这就会使用到HTTP basic Auth

# 格式    用户名:密码@代理地址:端口
proxy = {'http':'china:123456@192.168.1.1:3006'}
rsp = requests.get("http://www.baidu.com", proxies=proxy)

-web客户端验证

如果遇到web客户端验证,需要添加auth=(用户名,密码)

auth = ("123","3333")
rsp = requests.get("http://www.baidu.com", auth=auth)

本文分享自微信公众号 - JAVAandPython君(JAVAandPythonJun)

原文出处及转载信息见文内详细说明,如有侵权,请联系 yunjia_community@tencent.com 删除。

原始发表时间:2019-02-12

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

我来说两句

0 条评论
登录 后参与评论

相关文章

  • Laravel5.2之Filesystem源码解析(上)

    说明:本文主要学习Laravel的Filesystem模块的源码逻辑,把自己的一点点研究心得分享出来,希望对别人有所帮助。总的来说,Filesystem模块的源...

    botkenni
  • yii2之layout布局篇

    在做网站的过程中,大部分的页面结构都是相似的。如都有相同的头部和底部。各个页面这样仅仅是中间的部分不同。

    botkenni
  • yii2使用Migrations为整个数据库表创建迁移

    本教程为整个数据库表进行创建迁移,弥补以前未做的工作,且仅适合于Migrations(2.0.8)版本用户及以上。

    botkenni
  • Web安全性测试介绍

    安全性测试主要是指利用安全性测试技术,在产品没有正式发布前找到潜在漏洞。找到漏洞后,需要把这些漏洞进行修复,避免这些潜在的漏洞被非法用户发现并利用。像我们测试...

    只喝牛奶的杀手
  • Yii2.0 RESTful API快速搭建教程

    这是安装Yii2.0的首选方法。如果你还没有安装 Composer,你可以按照这里的说明进行安装。

    botkenni
  • Laravel5.3之Container源码解析

    说明:本文主要学习Laravel中Container的源码,主要学习Container的绑定和解析过程,和解析过程中的依赖解决。分享自己的研究心得,希望对别人有...

    botkenni
  • 爬虫篇| 爬取百度图片(一)

    网络爬虫(又被称为网页蜘蛛,网络机器人,在FOAF社区中间,更经常的称为网页追逐者),是一种按照一定的规则,自动地抓取万维网信息的程序或者脚本。另外一些不常使用...

    用户6029108
  • 推荐几款极简的手机浏览器

    对于本人而言,不喜欢浏览器的首页有多余的新闻,天气以及其他的推送信息,作为一款浏览器,就应该有一款浏览器该有的样子。今天就给大家推荐几款个人认为极简的手机浏览器...

    编程珠玑
  • Laravel 5.3之 Query Builder 源码解析(中)

    通过构造函数知道该MySqlConnection有了三件利器:PDO实例;Grammar SQL语法编译器实例;Processor SQL结果处理器实例。那PD...

    botkenni
  • Yii2 进阶篇

    过滤器是控制器动作执行之前或之后需要执行的代码。该代码以对象的形式执行,则应该使用类的方式定义并申明。 过滤器本质上是一种特殊的行为。

    botkenni

扫码关注云+社区

领取腾讯云代金券