本文知识点
·私密代理的使用流程
·代码样例
前提条件: 私密代理的订单,可以免费试用。联系他们的客服开通试用
使用流程
生成API链接,提取IP
设置代理,进行验证
开始爬取
代理验证采用用户名密码的方式。这种验证很方便,简洁。
代码样例
先把代码贴出来,再一步一步按要求来。大家先copy过去,代码里需要注意以下三项皆为实际在快代理官网获得的参数。
api_url api链接
username, password 代理验证的用户名与密码
page_url 默认是快代理验证IP的
以下代码为python3所写
"""快代理私密代理使用教程"""
import requestsimport random# 要访问的目标网页page_url =
# API接口,建议返回格式用jsonapi_url = ""try:
api_res = requests.get(api_url).json()['data']['proxy_list']except Exception:
api_res = requests.get(api_url).text.split("\r\n")proxy = random.choice(api_res)# 用户名和密码(私密代理分配的)username = ""password = ""# 代理IP的格式proxies = {
"http": "http:// /" % {'user':username, 'pwd':password, 'proxy': proxy},
"https": "https:// /" % {'user': username, 'pwd': password, 'proxy': proxy }}# 添加header,模拟用户请求headers = {
"Accept-Encoding": "Gzip", # 使用gzip压缩传输数据让访问更快
"User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/79.0.3945.117 Safari/537.36"}# 发送request请求,打印响应code与body内容r = requests.get(url=page_url, proxies=proxies, headers=headers)print("response code",r.status_code)print("response body",r.text)123456789101112131415161718192021222324252627282930313233343536
生成API链接,获取代理IP
打开后台,找到订单,点击生成API链接
打开后,默认http协议,返回格式选json,然后点击生成链接,下面的API链接直接复制上。
获取username,password 。
username,password在订单管理里面查看
点击管理,打开后就能看到代理用户名和密码
开始爬取
需要的都找到了,那现在运行下。看看结果,结果如下
response code 200。
领取专属 10元无门槛券
私享最新 技术干货