我正在尝试使用python - selenium和bs4从雅虎搜索中获得搜索结果。我已经能够成功地获得链接，但我无法单击底部的按钮转到下一页。我尝试了一种方法，但在第二页之后无法识别。p=stack+overflow&fr=sfp&iscqry=&fr2=sb-top-search 这就是我所做的从页面获取数据，但需要放入一个改变页面的循环中： page = BeautifulSoup
浏览 32提问于2021-06-24得票数 0
回答已采纳
1回答
我试图在不使用Selenium的.click函数的情况下点击网页上的一个按钮，这样我就可以抓取下一页的内容。下面可以看到这个按钮。
我见过其他问题，其中使用了一个.post，但我似乎无法准确地理解它。
浏览 5提问于2022-11-07得票数 -2
我正在尝试使用scrapy从flipkart.com中抓取一些数据。除了翻到下一页，我什么都拿到了。首先，我尝试使用scrapy，然后使用selenium。实际上，一个类有上一页和下一页的两个链接。 使用scrapy:我无法获取任何结果。我得到的是空白输出。 使用selenium:每当我尝试点击下一</
浏览 45提问于2021-02-10得票数 1
我有一个三视图的UIPageView控制器。现在的问题是，如果您在视图上滑动，页面将沿着滑动的方向滚动。但是，如果您在页面指示符上滑动，则页面滚动方向与滑动方向相反。有人知道我怎么解决这个问题吗？
浏览 1提问于2015-10-13得票数 0
回答已采纳
3回答
selenium.click([xpath to object])编辑它看起来只是在屏幕改变后无法点击。它将单击登录按钮，并加载新屏幕。下一次点
浏览 3提问于2011-06-02得票数 2
回答已采纳
因此，我正在尝试使用Selenium (Python)浏览药房网站。这个网站提供了数千种药品和保健产品的目录。我试着做一个“横向”的网络抓取，提取每一个产品在目录的每一页的链接(此刻，我可以这样做)。分页中的前面的按钮如下所示：HTML还有下一条路径：我想
浏览 7提问于2022-02-02得票数 0
我想在一个动态的href上做一个循环。实际上，我每页下载一组文件。在每个页面上，我下载了100个文本文件，但我必须下载20万个文件。所以，我必须在2000年单击next按钮。为此，我获得了next按钮的href地址，但不幸的是，这个链接中的两个对象发生了变化，页码1、2、3等，以及一个字符串。请参阅附件中的下一步按钮的变化样本。
#Before I add selenium</e
浏览 1提问于2019-04-10得票数 1
我正在使用Selenium Server测试一个基于小部件的网页。所有的小部件都包含在一个iFrame中，每个小部件都包含自己的iFrame。我正在尝试操作title指定的特定小部件中的元素，但是Selenium似乎无法识别第二个iFrame之外的任何内容。
小部件的标题在第一个iFrame中，我需要使用它来确定下一步选择哪个iFrame。我用来
浏览 2提问于2011-12-02得票数 2
问题是，我试图让我的程序在搜索框中输入pewdiepie，然后播放那里的第一个视频(这将演变成一个更大的项目，但这是它的要点)。问题是，当它向我显示搜索结果时，它在同一个标签上，selenium函数似乎无法识别它。我该如何解决这个问题呢？以下是我到目前为止编写的代码：from selenium.webdriver.common.keys import K
浏览 0提问于2019-12-20得票数 2
1回答
我们有一个网页应用，当我们点击“采取自拍按钮”，它将我们重定向到下一页。在下一页中，首先是检测人脸，而不是加载过滤器。我的问题是:有没有办法，我们可以绕过人脸检测，直接进入下一步？
注意:如果没有检测到面板，下一个选项将不会加载。
浏览 8提问于2022-07-20得票数 0
5回答
我在Junit中使用Selenium RC。我已经录制了IDE脚本，使用IDE可以很好地工作。当相同的代码使用Junit格式格式化并试图通过Eclipse和Junit运行时，会出现上述超时错误。("60000");
selenium.type("id=TopSearch&
浏览 0提问于2013-03-03得票数 1
1回答
我尝试了spynner，selenium，机械化，但在这种情况下不能解决javascript的问题。有没有人可以让我知道如何处理这样的问题才能将数据放到下一页？当我在selenium上工作时，在这个url中，我们首先必须获得其他选择框中的数据，然后继续，但使用selenium，我在点击下一页后只能获得相同的url，spynner的情况也是如此。
浏览 1提问于2012-05-25得票数 0
回答已采纳
我能够正确地刮掉第一页。但是要转到下一页，我需要一个按钮点击。我需要一些帮助来理解这一点。我正在使用Selenium and Beautiful soup来获得页面响应。;" title="Next Page" class="rgPageNext"> 我尝试过的示例代码如下： for i in range(0,14):
浏览 28提问于2019-10-01得票数 0
我刚接触selenium，想了解如何识别iframe或弹出窗口中的元素。在我们的应用中，当我们点击一个按钮时，弹出窗口或iframe就会加载到同一页面上。在该页面上，我需要单击一个按钮，然后继续我的其他操作。在记录时，selenium不会等待弹出窗口或iframe被加载。它将转到下一个命令并失败，因为由于iframe/popup仍在加载，因此尚未找到对象。
应该使用wait命令等待它加载，或者使用<
浏览 1提问于2012-10-10得票数 3
我在使用selenium web驱动程序从网站上抓取所有内容时遇到了一些问题。我遇到的问题是，分页上的next按钮没有类，下面是分页部分的html： <ul class="pagination"> <span> »</span>
<&#
浏览 7提问于2021-03-15得票数 1
回答已采纳
我有一个应用程序，它需要selenium导航到下一页，并验证是否找到所需的信息，它没有找到，但返回到同一页，然后单击下一个用户信息，验证所需的信息是否找到，这将继续下去，直到我们有用户链接。我的流程:我已经创建了运行enhance for循环的所有用户链接的列表。现在，当用户点击第一个用户链接，如果没有找到比selenium返回同一页面的信息，当尝试点击<
浏览 1提问于2014-12-17得票数 0
2回答
我正在写我的第一个真正的刮板，虽然总的来说进展顺利，但我使用Selenium时碰到了一道墙。我没办法把它转到下一页。
下面是我的代码头。下面的输出现在只是在终端中打印数据，这一切都很好。它只是停止在第1页的末尾刮，并向我显示我的终端提示。它从来没有在第二页开始。如果有人能提出建议，我将不胜感激。我尝试在页面底部选择按钮，尝试使用相对Xpath和完整Xpath(您在这里看到完整<em
浏览 2提问于2020-07-30得票数 0
回答已采纳
在Python中，使用Selenium，我试图通过爬行器自动获取一些关于NAE成员的信息。所以我从这个开始。我通过xpath "//*[@title=\"Next Page\" and @class=\"next_page\"]"定位了下一页的元素，我确信这是正确的。然后我发现我不能对这个元素进行“单击”，这意味着我无法获得下一页。现在我
浏览 1提问于2018-03-05得票数 0
回答已采纳
我试着用Python语言做一个项目，它需要来自的金属乐队的完整列表。问题是，当你访问任何字母时，你不会得到完整的列表，而只是最多500个波段的一大块(我只需要他们的urls )。要获得下一个块，你应该点击一个按钮，而我既不知道如何在代码中触发按钮，也不知道如何在它之后抓取数据。我在谷歌上搜索的是我应该使用selenium，但我不确定，也不能理解它的真正用途。此外，我尝试使用来抓取数
浏览 1提问于2020-05-10得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
