首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

如何在python中从多次重定向的url中获取目标url?

在Python中,可以使用requests库来获取目标URL。以下是一个示例代码,用于从多次重定向的URL中获取目标URL:

代码语言:txt
复制
import requests

def get_final_url(url):
    response = requests.get(url, allow_redirects=False)
    if response.status_code == 302:
        redirect_url = response.headers['Location']
        return get_final_url(redirect_url)
    else:
        return url

target_url = get_final_url('https://example.com/redirect')
print(target_url)

上述代码中,get_final_url函数接收一个URL作为参数,并发送一个不允许重定向的GET请求。如果返回的状态码是302,表示发生了重定向,我们可以从响应头中获取重定向的URL,并递归调用get_final_url函数来获取最终的目标URL。如果返回的状态码不是302,则表示已经到达了目标URL,直接返回即可。

请注意,上述代码中使用了requests库来发送HTTP请求。如果你的环境中没有安装该库,可以使用以下命令进行安装:

代码语言:txt
复制
pip install requests

对于以上问题,腾讯云没有特定的产品或服务与之相关。

页面内容是否对你有帮助?
有帮助
没帮助

相关·内容

Django获取URL数据

Django获取URL数据 URL参数一般有两种形式。...q=Django&t=blog&u=zy010101 我们将第一种形式称为“URL路径参数”;第二种形式称为“URL关键字形式”。下面讲述如何在Django获取这两种形式数据。...在此之前,需要说明是,在URL携带数据方式一般是前端发起GET请求,至于为什么GET请求不在请求体携带参数,可以参考这篇文章:关于在GET请求中使用body URL路径参数 使用path函数...需要注意在Django,使用正则表达式来获取分组语法是(?Ppattern),其中 name 是组名,pattern 是要匹配模式。...HttpRequest对象属性GET、POST都是QueryDict类型对象 Django获取URL关键字参数可以通过HttpRequest.GET属性来获取

5.6K30

如何 100 亿 URL 找出相同 URL

对于这种类型题目,一般采用分治策略 ,即:把一个文件 URL 按照某个特征划分为多个小文件,使得每个小文件大小不超过 4G,这样就可以把这个小文件读到内存中进行处理了。...使用同样方法遍历文件 b,把文件 b URL 分别存储到文件 b0, b1, b2, ..., b999 。...这样处理过后,所有可能相同 URL 都在对应小文件,即 a0 对应 b0, ..., a999 对应 b999,不对应小文件不可能有相同 URL。...那么接下来,我们只需要求出这 1000 对小文件相同 URL 就好了。 接着遍历 ai( i∈[0,999] ),把 URL 存储到一个 HashSet 集合。...然后遍历 bi 每个 URL,看在 HashSet 集合是否存在,若存在,说明这就是共同 URL,可以把这个 URL 保存到一个单独文件

2.9K30

面试:如何 100 亿 URL 找出相同 URL

对于这种类型题目,一般采用分治策略 ,即:把一个文件 URL 按照某个特征划分为多个小文件,使得每个小文件大小不超过 4G,这样就可以把这个小文件读到内存中进行处理了。...使用同样方法遍历文件 b,把文件 b URL 分别存储到文件 b0, b1, b2, ..., b999 。...这样处理过后,所有可能相同 URL 都在对应小文件,即 a0 对应 b0, ..., a999 对应 b999,不对应小文件不可能有相同 URL。...那么接下来,我们只需要求出这 1000 对小文件相同 URL 就好了。 接着遍历 ai( i∈[0,999] ),把 URL 存储到一个 HashSet 集合。...然后遍历 bi 每个 URL,看在 HashSet 集合是否存在,若存在,说明这就是共同 URL,可以把这个 URL 保存到一个单独文件

4.5K10

面试:如何 100 亿 URL 找出相同 URL

对于这种类型题目,一般采用分治策略 ,即:把一个文件 URL 按照某个特征划分为多个小文件,使得每个小文件大小不超过 4G,这样就可以把这个小文件读到内存中进行处理了。...使用同样方法遍历文件 b,把文件 b URL 分别存储到文件 b0, b1, b2, ..., b999 。...这样处理过后,所有可能相同 URL 都在对应小文件,即 a0 对应 b0, ..., a999 对应 b999,不对应小文件不可能有相同 URL。...那么接下来,我们只需要求出这 1000 对小文件相同 URL 就好了。 接着遍历 ai( i∈[0,999] ),把 URL 存储到一个 HashSet 集合。...然后遍历 bi 每个 URL,看在 HashSet 集合是否存在,若存在,说明这就是共同 URL,可以把这个 URL 保存到一个单独文件

2.3K20

面试经历:如何 100 亿 URL 找出相同 URL

对于这种类型题目,一般采用分治策略 ,即:把一个文件 URL 按照某个特征划分为多个小文件,使得每个小文件大小不超过 4G,这样就可以把这个小文件读到内存中进行处理了。...使用同样方法遍历文件 b,把文件 b URL 分别存储到文件 b0, b1, b2, ..., b999 。...这样处理过后,所有可能相同 URL 都在对应小文件,即 a0 对应 b0, ..., a999 对应 b999,不对应小文件不可能有相同 URL。...那么接下来,我们只需要求出这 1000 对小文件相同 URL 就好了。 接着遍历 ai( i∈[0,999] ),把 URL 存储到一个 HashSet 集合。...然后遍历 bi 每个 URL,看在 HashSet 集合是否存在,若存在,说明这就是共同 URL,可以把这个 URL 保存到一个单独文件

1.9K00
领券