知识点讲解二：代理ip中的proxies

K同学啊

发布于 2019-01-22 15:14:16

6660

发布于 2019-01-22 15:14:16

proxise

proxies的格式是一个字典：{‘http’: ‘http://42.84.226.65:8888‘}

有http与https两种，在爬取不同网站时我们需要选用不同类型的网站时选用不同的proxise，在不知道网站类型时可以将两种类型均放进去，requests会自动选择合适的

proxies = {
  "http": "http://10.10.1.10:3128",
  "https": "http://10.10.1.10:1080"
}

如果你是这样的

proxies = {
  "http": "http://10.10.1.10:3128"
}

而你要爬的是https型网站 requests请求可以成功，但是请求使用的将会是你真实的ip地址

如果你是这样的

proxies = {
  "https": "http://10.10.1.10:1080"
}

而你要爬的是http型网站你的requests也可以成功，但是使用的还是你真实的ip地址

只有当你的proxies类型与你想访问的网站类型相同，代理ip才会起作用可以用以下代码检验你的代理ip是否成功启用

import requests

proxies = {
	"https": "http://10.10.1.10:1080"
}
req = requests.get('http://icanhazip.com/', proxies=proxies)
print(req.content)

判断代理是否有效的方法

import telnetlib

try:
	telnetlib.Telnet('10.10.1.10', port='1080', timeout=3)
except:
	print('ip无效！')
else：
	print('ip有效！')

本文参与腾讯云自媒体分享计划，分享自作者个人站点/博客。

原始发表：2018年08月14日，如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自作者个人站点/博客前往查看

如有侵权，请联系 cloudcommunity@tencent.com 删除。

本文参与腾讯云自媒体分享计划，欢迎热爱写作的你一起参与！

登录后参与评论

0 条评论

热度