我有一个urls列表，我希望我的代码循环通过这些多个urls的多个页面 urls = ['https://www.f150forum.com/f118/2019-adding-adaptive-cruisewww.f150forum.com/f118/adaptive-cruise-control-sensor-blockage-446041/'
浏览 20提问于2020-01-14得票数 0
2回答
图片下载器美汤
、、、
我为我的朋友做了一个python脚本(我输掉了赌注)，它通过data-thumb_kB标签下载所有的缩略图(大约50个img，一个img大小是20 img)，其中有url。这段代码能不能破坏网站或者影响它(我指的是DDOS或者smth这样的)？我用了几次10,20,30个imgs，它工作得很好，网站也正常工作(这是一个非常受欢迎的网站，世界上最受欢迎的网站之一，没有说在这个网站上网络抓取是非法的)，但我需要知道它是否是安全的代码。Image.open(requests.
浏览 24提问于2019-11-13得票数 0
1回答
这个表扩展到多个页面上，但是url没有像page=3这样的东西，所以我不能遍历各个页面来获取数据。
有没有其他方法可以像这样抓取数据，而不会在不同的页面上循环？如何从python访问不同的页面来抓取数据？
浏览 19提问于2018-03-04得票数 0
有没有办法获得一个页面的所有请求的urls？例如，当我访问一个站点时，浏览器向服务器发出多个网络请求，例如html、css和其他显示页面所必需的文件。我想使用Python获取所有这些资产的urls。基本上，我想从下面的截图中获得所有的urls。有谁能给我指个方向吗？
浏览 7提问于2016-05-17得票数 1
5回答
快速网络爬虫
、、、
我想进行大规模的数据挖掘。为此，我需要一个快速爬虫。所有我需要的是下载一个网页，提取链接和递归跟随他们，但不访问相同的网址两次。基本上，我想避免循环。
我已经用python写了一个爬虫，但是太慢了。最高速度约为40个urls/秒。由于某些原因，很难得到更好的结果。这似乎是python的多线程/套接字的问题。我也遇到了python的gargabe
浏览 4提问于2011-10-05得票数 8
回答已采纳
我想让python脚本，将随机访问某些网站上的超链接在每1秒。urlopen(url) except Exception, e:
导入链接中链接的urllib2导入re = '‘页面= urllib2.urlopen( url )页= page
浏览 2提问于2014-08-05得票数 0
1回答
我最近开始用Python语言进行网站设计，我尝试过多种框架，但除了一个问题之外，web.py似乎是我的最爱。我似乎想不出如何用多个模板制作多个页面……import web
app =web.application(<e
浏览 1提问于2011-11-06得票数 0
回答已采纳
1回答
我想请教一下我的想法。 编写抓取机器人或在网站上执行某些活动的机器人(使用Puppeteer)时，我经常需要“某种”多线程功能，以便能够同时接近多个页面并在它们上执行某些操作，最好是同时进行。to required number of functions /&#x
浏览 35提问于2020-07-29得票数 3
基于之前的堆栈溢出问题和cgoldberg的贡献，我提出了使用python re模块的regex：urls = re.finditer('http://(.*?).mp3', htmlcode)for url in urls:
mp
浏览 1提问于2009-05-04得票数 2
回答已采纳
2回答
因此，我试图用Python请求加载多个JSON文件，但我无法找到正确的方法。[te.find("{"):te.rfind("}")+1]t = [] re = requests.get(url)
浏览 1提问于2019-11-11得票数 0
回答已采纳
我是neo4j的新手，毫无疑问我很喜欢它。(:User)-:VISITED->(:URL)-:CONTAINS->(:Tag)
现在，我想检索已经访问过多个<
浏览 2提问于2015-08-22得票数 2
回答已采纳
1回答
我正在尝试抓取一个包含12个链接的页面。我需要打开这些链接中的每一个，并刮掉它们的所有标题。当我打开每个页面时，我面对的是每个链接中的多个页面。但是，我的代码只能抓取这12个链接中的第一个页面 通过下面的代码，我可以打印主页上存在的所有12个链接URL。12个页面中每个<em
浏览 22提问于2021-04-06得票数 1
回答已采纳
我正在使用一个名为的工具来测试站点中的模板注入。这就是它对每个url的测试方式。python tplmap.py -u
开发人员没有包含多个urls的选项，如何使用awk/sed/cat从文本文件中添加多个urls？
浏览 10提问于2022-06-06得票数 -1
我创建了一个包含10多个链接的网页。是否可以将点击的urls或访问过的urls存储在我的数据库或文件中。我用servlet开发了网页。这只是一个有10个链接的页面。
浏览 0提问于2010-01-05得票数 1
回答已采纳
我试图请求多个页面，并将回调返回的变量存储到以后的请求中使用的列表中。def parse1(self,response): items=[] for u
浏览 0提问于2019-01-11得票数 3
回答已采纳
我正在尝试为我拥有的python脚本创建一个非常简单的单页面Flask应用程序。该脚本要求在for循环中有多个用户输入，循环的数量也是用户输入。以下是我的脚本中的代码，以使其更清晰： def shared_books(): from bs4 import BeautifulSoup= []
for i in
浏览 43提问于2020-09-02得票数 0
使用user-profile.tpl.php自定义用户资料页面。
在访问诸如“user/3/photo”或“user/5/photo”之类的urls时，需要使用自定义模板。如何在Drupal7中使用多个基于路径/ url的用户配置文件模板？我应该为模板使用什么名称？
浏览 1提问于2011-05-21得票数 1
回答已采纳
我正在从过去的两个月中学习。我的公司需要一个程序来检查多个URL，并对它们进行测试，看看这些站点是否正常工作。如果不起作用，则应生成一份报告，并向报告中的所有人发送一封电子邮件。我制作了一个程序来浏览多个URLS，也应该使用SMTP发送电子邮件。但问题是，我无法使用相同的代码登录到多个URLS。另外，我需要发送没有回复的电子邮件。我不能这样做。如果有人知道，请帮助我。我的程序使用s
浏览 0提问于2019-04-08得票数 -1
1回答
我有多个联系形式在我的wordpress网站，并有一个不同的感谢页面为每一个。因此，我想通过输入urls来阻止直接访问感谢页面。我想，如果用户填写了表单，而不是重定向到该表单，谢谢页面。我有1感谢页面的工作代码，但我不知道如何设置多个联系人表单&谢谢页面。 if ( !get_hom
浏览 0提问于2020-04-17得票数 1
回答已采纳
云服务器
ICP备案
腾讯会议
云直播
对象存储
腾讯云开发者
