Python -如何使用请求查找重定向的URL？

在Python中，你可以使用requests库来发送HTTP请求并处理重定向。requests库会自动处理重定向，但你可以通过检查响应对象来获取最终的重定向URL。

以下是一个简单的示例，展示了如何使用requests库来查找重定向的URL：

import requests

# 发送GET请求
response = requests.get('http://example.com')

# 检查是否有重定向
if response.history:
    # 打印所有的重定向历史
    print("Request was redirected:")
    for r in response.history:
        print(f"From: {r.url} To: {r.headers['Location']}")
    
    # 打印最终的重定向URL
    print(f"Final URL: {response.url}")
else:
    print("Request was not redirected")

在这个例子中，response.history是一个包含所有重定向响应的列表。每个重定向响应都有一个headers['Location']字段，指示下一个重定向的URL。如果没有重定向，response.history将为空。

优势

• 简单易用：requests库提供了简洁的API，使得发送HTTP请求和处理响应变得非常容易。
• 自动重定向：requests库会自动处理重定向，无需手动跟踪重定向链。
• 广泛支持：requests库支持各种HTTP方法（如GET、POST、PUT等）和自定义头信息。

类型

• GET请求：用于获取资源。
• POST请求：用于提交数据到服务器。
• PUT请求：用于更新资源。
• DELETE请求：用于删除资源。

应用场景

• 网页抓取：在爬虫程序中，经常需要处理重定向以获取最终的页面内容。
• API调用：在调用RESTful API时，可能需要处理重定向以获取最终的数据。
• 自动化测试：在编写自动化测试脚本时，可能需要验证重定向行为。

常见问题及解决方法

问题：为什么requests库没有自动处理某些重定向？

• 原因：某些重定向可能是基于条件的（如303 See Other），或者服务器配置不允许自动重定向。
• 解决方法：可以手动处理重定向，通过检查响应状态码和Location头信息来实现。

import requests

response = requests.get('http://example.com', allow_redirects=False)

if response.status_code in (301, 302, 303, 307, 308):
    print(f"Redirect to: {response.headers['Location']}")

问题：如何禁用requests库的自动重定向功能？

• 解决方法：在发送请求时，设置allow_redirects=False参数。

response = requests.get('http://example.com', allow_redirects=False)

通过这些方法，你可以有效地处理和跟踪HTTP请求中的重定向。