使用selenium单击后出现嵌套页面中的刮取表
，可以通过以下步骤来实现：
- 首先，确保已安装并配置好selenium库。Selenium是一个自动化测试工具，可以模拟用户在浏览器中的操作。
- 使用适合的编程语言（如Python、Java等）编写脚本，导入selenium库。
- 创建一个浏览器实例，可以选择使用Chrome、Firefox等浏览器。例如，使用Chrome浏览器可以使用ChromeDriver来控制。
- 使用浏览器实例打开目标网页，找到需要点击的元素。可以使用selenium提供的查找元素的方法，如find_element_by_xpath、find_element_by_id等。
- 使用selenium的点击方法（如click()）点击目标元素，触发嵌套页面的加载。
- 等待嵌套页面加载完成。可以使用selenium提供的等待方法，如implicitly_wait、WebDriverWait等。
- 切换到嵌套页面的frame或窗口。如果嵌套页面是在一个frame中，可以使用switch_to.frame()方法切换到该frame。如果是在一个新窗口中，可以使用switch_to.window()方法切换到该窗口。
- 在嵌套页面中进行表格的刮取。可以使用selenium提供的查找元素的方法，如find_element_by_xpath、find_element_by_id等，找到目标表格元素。
- 使用selenium提供的获取元素文本的方法，如text属性，获取表格的内容。
- 可以将获取到的表格内容保存到文件中，或进行进一步的处理和分析。
腾讯云相关产品推荐：
- 腾讯云服务器（CVM）：提供稳定可靠的云服务器实例，可用于部署和运行自动化测试脚本。产品介绍链接：https://cloud.tencent.com/product/cvm
- 腾讯云云函数（SCF）：无服务器计算服务，可用于自动化测试脚本的部署和运行。产品介绍链接：https://cloud.tencent.com/product/scf
- 腾讯云对象存储（COS）：提供安全可靠的云端存储服务，可用于存储测试脚本和结果数据。产品介绍链接：https://cloud.tencent.com/product/cos
- 腾讯云数据库（TencentDB）：提供高性能、可扩展的云数据库服务，可用于存储和管理测试数据。产品介绍链接：https://cloud.tencent.com/product/cdb
以上是关于使用selenium单击后出现嵌套页面中的刮取表的完善且全面的答案。
相关·内容
我正在尝试使用Python中的Selenium (使用Chrome驱动程序)刮下下面的网页。
我只想收集博彩公司是Bet365的几行数据。
在这种情况下，我已经能够获得所有的行。但是，我很难在单击值时出现的“onclick”表中刮取信息：
上面的图像显示了当单击5.90时出现的表存档概率。
其目的是从Bet365是庄家的所有行中的每个表中收集信息。
到目前为止，我的尝试是使用CSS-选择器定位所有的“onclick”链接：
table_links = browser.find_elements_by_css_selector("span[onclick*='16);
浏览 0提问于2018-11-23得票数 0
回答已采纳
我试图在Totals表中的链接：中刮取播放器的统计数据。当你第一次出现在那个网站上的时候，刮数据要困难得多，所以你可以选择点击表格上方的“CSV”。这种格式要容易得多。
我有麻烦了
import urllib2
from bs4 import BeautifulSoup
from selenium import webdriver
player_link = "http://www.basketball-reference.com/players/j/jordami01.html"
browser = webdriver.Firefox()
browser.get(play
浏览 4提问于2016-07-20得票数 2
回答已采纳
页面，我需要它从：中刮取数据
问题
允许在每个表中只显示100行，因此我必须使用在多个表之间移动。正如下面的代码所示，我实际上是这样做的，但是每次第一个表结果出现时，results都会向我检索，而不会在单击操作ActionChains(driver).click(element).perform()上转到下一个表结果。
请记住，没有打开新页面，单击将被某种JavaScript拦截，以便在同一页上执行一些丰富的UI操作，以加载新的数据表。
我的期望
我只是试图验证我是否可以移动到下一个表，然后我将编辑代码以遍历所有这些表。这段代码应该从结果返回第二个表中的数据，但它实际上返回最初加载URL的第一
浏览 1提问于2020-12-12得票数 2
1回答
我试图使用和Selenium从LinkedIn中刮取数据。
在获取页面上的名称之后，我想找到"Next“按钮并单击它。
“下一步”按钮位于下面突出显示的文本(顺便说一下，它来自Firefox页面)：
所以我想：
next_button_find=browser.find_element_by_class_name('next')
next_button_find.click()
但是，它在执行时会出现此错误：
我也尝试过基于这个
next_button_find=browser.find_elements_by_class_name('next&
浏览 1提问于2019-07-06得票数 1
回答已采纳
1回答
我尝试了几次不同的尝试来刮下下面的页面：
不知何故，我在请求或selenium方法方面没有成功。
那些人知道如何刮取历史数据表的数据吗？
谢谢你的暗示。
ThinkerBell
浏览 3提问于2022-05-17得票数 0
我想能够点击几个链接在一个网页的搜索结果。为此，我尝试创建一个web元素列表，查找搜索结果页面中与链接对应的所有xpath。然后，我希望能够单击每个xpath的这些链接，然后返回到搜索结果页面，然后单击列表中的下一个链接。
到目前为止，我已经能够创建一个嵌套循环，它可以在页面上刮取所有的href标记来创建/查找xpath。循环的第二层是单击列表中与该元素相对应的链接，然后返回到搜索页面，单击列表中的下一个元素。
from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.web
浏览 0提问于2019-08-06得票数 1
回答已采纳
1回答
当我看不到源页面中的真实值时，如何在页面上刮取真正的文本值"2015-10-31“？我可以刮到html的右边，但我需要知道左边显示的值"2015-10-31“。我所搜索的只是使用selenium自动呈现javascript，但是结果对我来说毫无意义，因为我想要表中的实际值，而不是Webkit中显示的相同结果。有办法刮掉这种隐藏的价值吗？
浏览 2提问于2015-11-07得票数 1
回答已采纳
2回答
如何在页面上向下滚动元素
、、、
我想从中刮取公司的名称，但是我的刮取器在页面滚动方面有问题。我通常使用以下方法向下滚动页面：
driver.execute_script("window.scrollTo(0, x)")
不幸的是，在这个页面上，execute_script方法不起作用。
我还试图通过send_keys方法操纵带有表od名称的元素，但我的脚本引发了错误：
elem = driver.find_element_by_xpath('//*[@id="root"]/div[2]/div[1]/div/div[2]/div[1]/div')
elem.send_keys(
浏览 5提问于2021-05-03得票数 0
1回答
无法单击下一页进行网页抓取
、、、、
我试着从这个网站上刮取学校的数据
单击"Cari Sekolah“按钮，转到第一页进行刮除。
我似乎想不出一种方法来单击下一页来从其他页面加载条目。单击下一页时，url不会更改。不同页面的HTML代码如下所示：
<a href="javascript:void(0)" onclick="paging(2)">2</a>
这是我的代码：
from selenium import webdriver
from selenium.webdriver import Chrome
from selenium.webdriver.
浏览 1提问于2020-04-02得票数 1
回答已采纳
我的脚本应该打开一个页面并单击出现的弹出窗口上的“同意”按钮。我的代码：
from selenium import webdriver
from selenium.webdriver.chrome.service import Service
from webdriver_manager.chrome import ChromeDriverManager
from selenium.webdriver.common.by import By
import time
s=Service(ChromeDriverManager().install())
driver = webdriver.Ch
浏览 1提问于2022-01-29得票数 0
I试图用下面的代码刮取下面的页面：
from selenium import webdriver
from selenium.webdriver.common.by import By
import time
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC
chrome_options = webdriver.ChromeOptions()
chrome_options.add_argument(
浏览 1提问于2022-10-24得票数 0
回答已采纳
1回答
在脚本标记中刮取数据
、、、
谁能建议一种在<script>标记中刮取数据的方法，特别是在这种情况下，从AEMO ()中获取30分钟的表。
要获取数据表，我需要单击该按钮在网站上显示表格或下载按钮。但是，这里的障碍是，当我试图使用Selenium对<script>标记进行抓取时，表的按钮和文本隐藏在它的后面。
到目前为止，我的代码如下：
# import libraries
import urllib.request
from bs4 import BeautifulSoup
from selenium import webdriver
import time
import pandas as pd
浏览 0提问于2019-10-19得票数 0
回答已采纳
我想使用selenium从这个网站上的表中刮取数据：
看来我看不清这一页。有谁知道我如何访问这个表并将数据保存在熊猫的数据中吗？
谢谢!
浏览 1提问于2022-09-13得票数 0
1回答
从使用Ajax请求的网站抓取数据
、、、、
到目前为止，我已经做了一个从网站上抓取数据的程序，我用python、selenium和美丽汤制作了一个程序，当它想从像这样的网站的页面中刮取数据时，我必须点击一个名为"سابقه“的选项卡(顶部是سابقه)，然后网站使用Ajax请求获取数据，然后我循环遍历表，表有多个页面，所以我必须点击表下面的数字，然后再收集新的数据。我的问题是这个方法非常慢，因为我还必须从500页中收集数据，每页包含35个表。还有其他更快的方法吗?或者，如果解决方案在python中，那么在我的程序中激发Ajax请求并获得response.It的方法会更好。
浏览 3提问于2017-12-15得票数 0
回答已采纳
2回答
我试图使用selenium点击地图，这样我就可以从类似盒子的容器中刮取parcel id和owner name。当单击该地图时，就会显示出类似盒子的容器。我想从这样的容器中刮掉parcel id和owner name。这就是的样子。我尝试使用请求，但找不到任何方法来定位这些容器中可用的信息，所以我现在尝试使用selenium。下面的脚本既不单击该地图，也不抛出任何错误。
from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui im
浏览 3提问于2020-06-08得票数 1
回答已采纳
使用Selenium IDE，我记录了一个包含click url的测试用例，然后给出用户名和密码，并单击按钮导航到下一个页面。
在render页面中，如果我单击任何链接，错误将显示为Element link=linkname not found。
为什么会出现这个错误？
浏览 3提问于2012-09-11得票数 0
我刚开始学习数据抓取。为此，我使用Selenium，并将数据存储在excel表中。问题是，我无法弄清楚如何使selenium循环单击下一个页面，并在页面用完之前也刮取它们的数据。为了更好地理解下面的内容，我编写了完整的代码。
from selenium import webdriver
import pandas as pd
from openpyxl.workbook import Workbook
DRIVER_PATH = 'C:/Users/Neha/Downloads/chromedriver_win32/chromedriver'
driver = webdri
浏览 0提问于2020-08-08得票数 0
回答已采纳
首先，我想描述一下我提出这个问题的动机。
我有一个复杂的网页要用Selenium + HtmlUnit测试，它可以启动不同的javascript脚本。我所描述的问题应该是相当普遍的。
页面上有一个按钮，在页面加载后，jQuery将单击回调(单击事件处理程序)绑定到该按钮。在测试代码中，有一个显式的等待(这是Selenium术语)，等待按钮变得可点击。因此，一旦按钮变为可单击状态，Selenium就会立即单击它。但是，这通常发生在jQuery设法将click事件处理程序附加到按钮之前。在这种情况下，Selenium测试失败。
我想要做的是在javascript开始在页面上执行之前对HtmlUni
浏览 0提问于2016-03-11得票数 2
3回答
我正在尝试使用和selenium从bs4和selenium页面上的单词列表中刮取单词及其含义，尽管我不知道如何在从bs4 find_all方法获得表html之后循环遍历<tr>和<td>标记：
from selenium import webdriver
from bs4 import BeautifulSoup
root = "https://www.graduateshotline.com/gre-word-list.html"
driver.get(root)
content = driver.page_source
soup = Beauti
浏览 0提问于2021-07-14得票数 1
回答已采纳
1回答
将html表抓取到数据框中。
、、、、
我已经构建了一个小刮板，它通过selenium指向网站中的页面，然后将最终页面上出现的html表读取到数据帧(或仅是标题页)中。我被卡在最后一块了。我打开最后一页就卡住了。
这是最终页面的html输出。表头在标签中，观察值在标签中。我的表代码可能很糟糕，但下面是：
df = pd.read_html(browser.get(table),header=0)
print(df.head(n=6))
表是url btw。
我得到的错误是"TypeError:无法读取类型为‘NoneType’的对象“。我相信我漏掉了一步，如果有人能给我指出正确的方向，我将不胜感激。
浏览 2提问于2017-07-18得票数 0
我正在尝试使用Selenium WebDriver从Amazon上的URL中抓取页面左侧的6幅图像：
然而，无论我尝试什么，都会导致一个错误。到目前为止我尝试过的是：
我尝试使用XPATH直接抓取图像，然后使用"getAttributes“方法提取src。例如，对于页面上的第一个图像，XPATH是：
.//*@id=‘a-autoid-2’/span/输入
因此，我尝试了以下几点：
String path1 = ".//*[@id='a-autoid-2']/span/input";
String url = "
浏览 0提问于2015-01-23得票数 2
回答已采纳
3回答
我正在用Selenium IDE测试一个ADF应用程序。有一次，自动化测试用例必须单击一个按钮，该按钮的partialTrigger属性指向页面上的一个表，在该按钮执行某些背景逻辑之后，表中填充了行，但页面没有完全刷新。
我面临的问题是，Selenium在单击按钮后找不到表行。可能Selenium不知道页面的DOM更新，但我不确定。
到目前为止，我尝试的是：
我在表的第一行中存储了一个单元格的预期完整xpath。
创建一个自动执行的JavaScript函数，用于单击给定的路径。
我在一个简单的HTML页面上测试了以下命令，它们运行得很好。
Selenium命令：
<t
浏览 2提问于2013-12-10得票数 2
我最近开始了自由职业的python编程，并受雇于编写一个脚本，在网上刮取某些信息(没有恶意，只是检查关键字在搜索结果中出现的频率)。
我用Selenium编写了这个脚本，现在它已经完成了，我不太确定如何准备它在客户机的机器上运行。
Selenium需要一个到达chromedriver文件的路径。我是否需要将py文件编译为exe，并接受他的chromedriver的路径作为参数，然后告诉他如何下载chromedriver和如何编写路径？
编辑:只是在打字的时候有了一个想法。如果我向客户端发送一个文件夹，其中包括该文件夹中的一个chromedriver.exe，那么路径总是一致的，会有效吗？
浏览 0提问于2018-05-11得票数 0
回答已采纳
我试图使用Python中的Selenium从网站上删除数据，其中数据只在我单击“Details”按钮时才会出现，问题是这个按钮最初是不可见的，需要在内部滚动条上滚动。
供参考，以下是网站：
目标是滚动这个内部滚动条，这样我就可以点击按钮，查看/刮取数据。
这是我的初始代码：
scrollBar = driver.find_element(By.XPATH,'//*[@id="mCSB_1_dragger_vertical"]/div')
driver.execute_script("arguments.scrollBy(0,arguments[0].sc
浏览 25提问于2022-05-11得票数 0
回答已采纳
我试图在网络上抓取github项目比特币项目的一个特定链接()的贡献者。我在用硒。我正在刮写“44个投稿人”的投稿人。只有当我手动转到页面并单击“44个贡献者”时，我的代码才会刮取贡献者的名字。否则，就会产生空的贡献者列表。请帮助我使我的代码工作，即使没有进入页面，并点击“44个贡献者”。下面是单击之前和之后页面的快照：
from selenium import webdriver
from selenium import webdriver
driver = webdriver.Chrome(r'C:\Users\saran\chromedriver_win32\ch
浏览 2提问于2020-06-14得票数 1
回答已采纳
我运行selenium来导航一个站点(登录)&刮取数据。但是，我认为selenium似乎只能导航HTML，而不能导航DOM，除非我不了解页面是如何呈现的。具体来说，当我打开moodys.com时，我可以找到登录按钮。然而，当出现登录弹出时，源代码和元素检查之间有一个断开，即我可以在元素检查下看到html代码，但是它没有出现在源代码中，所以当我想输入我的凭据时，我不能选择登录框。
此代码运行良好：
capabilities = { 'chromeOptions': { 'useAutomationExtension': False}}
driver =
浏览 0提问于2019-01-21得票数 0
回答已采纳
我正在尝试从Power表中获取数据。在表上盘旋时会出现一些元素。当我右键单击...时，我看不到Inspect Element。然而，当我左击这个元素时，我可以看到一个菜单，如果我右键单击任何项目，我可以看到Inspect element。我的第一个问题是，为什么我看不到浏览器中所有元素的右键菜单中的Inspect Element。我是否能够以编程方式在Selenium中打开这个...菜单？
导出数据元素仅在第一次左键单击后出现在中。我假设这是使用Javascript创建的，为了用Selenium导出数据，我必须通过单击...菜单以编程方式实例化。selenium是否能够触发在动态网页中生成更多
浏览 16提问于2022-10-25得票数 2
2回答
有没有一个很好的方法来找到一个元素的xpath，这个元素只会出现很短的时间(比如一两秒钟，就像一个加载屏幕)。
如果我在应用程序中单击，会出现一个简短的加载屏幕，我希望找到加载元素的xpath，这样selenium就可以等到元素不再出现在页面上，然后再继续。
有时，加载屏幕会出现在我想要单击的元素上方，并捕捉到单击。
谢谢!
浏览 0提问于2020-04-24得票数 0
2回答
我正在使用Selenium和XPath Helper上的无头火狐来识别到达元素的异常长的路径。
当页面最初加载时，我可以使用xpath帮助查找任何感兴趣的元素的XPath，selenium可以在给定该元素时找到该元素。
然而，几个按钮，我需要与页面上的打开菜单时，按下，要么是小，或占用整个“屏幕”。不管容器的大小如何，这些容器都被覆盖在原始页面上，虽然我可以使用XPath Helper找到它们的XPath，但是当我尝试使用这些XPath查找使用selenium的元素时，它们是找不到的。
我查过了，也没有什么有趣的事情发生。我对可能发生的事情有点困惑。我的猜测是，在我按下打开菜单容器的按钮之后，
浏览 0提问于2021-01-26得票数 0
回答已采纳
1回答
我想从以下网站链接中刮取ISBN号码：
我想从列表中每本书的粗体明文中刮取ISBN数字，并将它们都放入一个数组中。我本来打算用xPath来做这件事的，但这就是我被困在这里的地方。由于我刚接触selenium w/Java，我很难理解如何使整个工作正常进行。我知道每一本书的ISBN数字都位于一个名为“最近表”的表类中，但我并不完全熟悉如何从那里开始。如有任何指导，将不胜感激。谢谢。
浏览 2提问于2015-05-13得票数 0
回答已采纳
我已经创建了下面的功能，从网站上刮取结果，我想知道如何：
首先单击"Tables (8,899)“选项卡，只从那里刮取结果。现在只刮第一页，我如何刮掉所有页面并将它们附加到一个数据文件中，而不必指定页数？
功能：
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC
from selenium.common.exc
浏览 2提问于2020-06-03得票数 1
1回答
我在python中编写了一个脚本，使用selenium从其登陆页面使用name和reputation函数获取get_names()函数，然后单击不同帖子的链接到达内部页面，以便使用get_additional_info()函数解析title。
我试图解析的所有信息在登陆页面和内部页面都是avaialabe。而且，它们不是动态的，所以selenium绝对是过火的。然而，，我的意图是利用selenium从两个不同的深度同时刮取信息。
在下面的脚本中，如果我注释掉name和rep行，我可以看到脚本可以执行登陆页面链接的单击，并且可以完美地从内部页面解析title。
但是，当我按原样运行脚本时
浏览 0提问于2019-09-01得票数 1
回答已采纳
我正在使用Python和Selenium来刮一个网站。我所做的就是转到，输入一个关键字，比如1300746-79-5.在上，我试图在“定价”部分中刮取数据。具体来说，我需要得到“SKU大小”和“价格(美元)”的信息。但是这些信息是Javascript附带的，所以我无法在源代码中看到它们。我想知道我怎样才能做到这一点。
我已经编写了一些代码，可以将我带到感兴趣的页面，但我仍然看不到javascript的信息。这是我到目前为止所拥有的。
from selenium import webdriver
from selenium.common.exceptions import TimeoutExce
浏览 1提问于2014-06-30得票数 0
回答已采纳
1回答
我们使用Selenium打开某些网页，但是当打开网页时，会弹出一个弹出，我们无法使用selenium代码处理弹出。下面是相同的示例代码。我正在尝试使用警报方法，但是系统无法检测到警报
System.setProperty("webdriver.chrome.driver","D:\\Test\\drivers\\chromedriver.exe");
WebDriver driver = new ChromeDriver();
driver.manage().window().maximize();
driver
浏览 0提问于2019-07-18得票数 0
回答已采纳
Selenium对通过xpath在页面中查找元素提供了一些很好的支持
selenium.isElementPresent("//textarea")
在ajax页面中，您可以使用waitForCondition在页面上等待，直到出现某些内容
selenium.waitForCondition("some_javascript_boolean_test_as_a_string", "5000")
我的困难在于，我似乎无法对布尔测试使用xpath支持。document.getElementById似乎工作得很好，但selenium.isElement
浏览 2提问于2009-06-16得票数 6
2回答
我有一个python脚本，它使用urllibs解析一些网页，并使用selenium来使用javascript刮取页面，我想知道它的累积带宽使用情况。我看过nethogs，但它告诉我每秒的使用情况，但不告诉我脚本在eth0上接收或发送了多少数据。
理想情况下，我希望它在我开始监视之后跟踪所有新进程，然后保存每个进程作为一个总体使用的表。
这样的工具存在吗？如果没有，我是否可以在脚本中实现Python中的库来跟踪这个库？
浏览 0提问于2011-06-09得票数 5
2回答
我试图先在Travelyaari.com上进行总线搜索，然后修改总线搜索，然后单击“修改搜索”按钮，但是，前面的“总线搜索结果”页面正在加载，我的情况出现了错误，因为
'Unable to locate element' org.openqa.selenium.NoSuchElementException.
我尝试使用xpath来识别‘修改搜索’按钮，但是在执行.isDisplayed()时，.click()是正确的，获取'Unable to locate element' org.openqa.selenium.NoSuchElementException.
浏览 0提问于2018-01-07得票数 0
我有一个用asp.net开发的应用程序，我使用Selenium WebDriver库。当在visual studio中刮取我自己的程序时，它会引发速成iis服务器并正确地打开我的selenium应用程序，但是当我将iis服务器放到visual studio开发之外时，他会打开我的asp.net页面，但是当我运行代码selenium来创建一个Iwebdriver时：
IWebDriver Web = new InternetExplorerDriver();
Web.Navigate().GoToUrl("https://www.google.com");
它不会打开我的网页，也
浏览 6提问于2015-08-07得票数 0
1回答
我正在尝试在python中使用selenium来进行webscrapping删除。当新浏览器打开accept Cookie按钮时，弹出，而刮取stopped.The按钮的位置是- Accept cookies，我使用以下代码-
from selenium import webdriver
import time
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC
driver.get(link)
driv
浏览 7提问于2022-04-12得票数 0
无法使用最新的3.0 selenium和FF中的协调器单击to按钮。
我指定了启动FF48浏览器的部分代码，打开登录页面并尝试单击以登录按钮。单击“到”按钮在Chrome中工作很好，但是在FF中失败。
环境：
Browser - FF48 (may be present with previous FF as well)
Selenium - Latest 3.0 beta jar
Works fine in latest Chrome.
代码：
// Launch browser
DesiredCapabilities capabilities = DesiredCapabilities.
浏览 3提问于2016-09-01得票数 1
回答已采纳
1回答
我正试图从一个网站上刮取预订数据。进入现场后，我必须：
将默认日期范围(首先，站点显示默认日期范围的预订数据)更改为我要搜索的的日期范围，单击“刷新”按钮等待网站更新页面上显示的结果。
使用Selenium、Python和BeautifulSoup，当我执行Selenium命令更新日期范围的字段并单击“刷新”按钮时，当代码到达我使用BeautifulSoup提取HTML数据的行时，将提取默认网站日期范围的默认预订数据，而不是我填写的日期范围的预订数据。
观察到，站点移动得太快了，硒无法提取更新的数据，这需要一些时间来加载。我试图使用driver.implicitly_wait(5)来解决这个问
浏览 3提问于2021-08-04得票数 1
回答已采纳
3回答
解决方案：这个特定站点的action是action="user/ajax/login"，因此为了实现有效负载，必须将其附加到主站点的url中。(action可以通过在ctrl + f中搜索action在Page Source中找到)。url是将要刮掉的东西。with requests.Session() as s:是在站点内部维护cookies的内容，这就是允许一致刮取的内容。res变量是将有效负载发布到登录url中的响应，允许用户从特定的帐户页面中刮取。在发布之后，请求将达到指定的url。在此基础上，BeautifulSoup现在可以从accounts站点中获取和解析HTML
浏览 6提问于2020-05-24得票数 0
回答已采纳
1回答
我试图从给定URL的ETH零SEK表中刮取数据，但是我无法使它工作。有没有人能给我一些建议让它开始工作？
from selenium import webdriver
from selenium.webdriver.common.by import By
url = 'https://www.ngm.se/marknaden/vardepapper?symbol=ETH%20ZERO%20SEK'
driver = webdriver.Chrome()
driver.get(url)
element = driver.find_element(By.Xpath, '
浏览 2提问于2022-02-08得票数 0
回答已采纳
2回答
我的脚本无法单击某个网格。
、、、、
我用python和selenium一起编写了一个脚本，以便从网页中获得一些信息。要达到内容，有必要跨越几个步骤，比如在accepting condition、fill in the inputbox、click on the search button中填充结果，最后单击填充表中的the first grid (更具体地说，第一个tr )。一旦启动对the first tr的任何单击，就会打开一个新页面(包含所需的信息)。
我的脚本可以成功地完成前三个步骤。我不能做的是：
perform a click on the first tr
focus to the newly opened
浏览 1提问于2018-07-15得票数 1
回答已采纳
1回答
即使我的元素已经被点击，并且我被导航到下一页，我仍然处于异常之下。
由:org.openqa.selenium.TimeoutException引起:预期条件失败:等待单击元素：
验证XPAth，但是由于元素已经被单击，所以不确定为什么会出现错误。
Description：单击按钮中的标志
action: org.getopentest.selenium.Click
args:
locator: { xpath: "//*[@id='login']/app-root/app-caf-login/div/div/div[2]/
浏览 0提问于2019-05-23得票数 0
基本表很容易使用Selenium进行抓取。我在用"_ngcontent“符号(”“)刮表时遇到了麻烦，我试图把它刮成一个数据格式。
这就是我所得到的：
from selenium import webdriver
from selenium.webdriver.common.keys import Keys
import pandas as pd
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions
浏览 1提问于2022-08-04得票数 0
回答已采纳
2回答
我在Selenium WebDriver for C#中对我们的webapp进行自动化测试。我们的测试方案之一指出了多次单击“保存”按钮时出现的问题，从而导致多个相同的记录。
标准的IWebElement.Click()会导致Selenium阻塞，直到页面完全加载。这意味着当我们第二次点击执行时，回发已经执行，我们不再在表单页面上了。
有人知道“手动”单击不会导致Selenium阻塞的元素的方法吗？
浏览 3提问于2014-08-13得票数 4
回答已采纳
2回答
我在Python中使用selenium来尝试和刮取多个页面。ID和XPATH的每个页面不断变化，所以我认为最好通过它们的属性值组合来访问它们(参见下面)。
我试图访问以下元素中的文本：，它属于以下内容：
正如我说过的，ID不断变化，所以我想通过数据片段名称=“articleDetail”或数据-=“文章体”来访问元素。有人能帮我怎么做吗？
提前感谢！
浏览 7提问于2022-09-13得票数 -2
我正在使用selenium + qtwebdriver为我的QT应用程序编写UI测试，我在应用程序中有一段时间需要测试:用户可以执行鼠标右键单击->某个菜单，用户可以在此菜单中单击。我试过这段代码：
#!/usr/bin/env python
from selenium import webdriver
from selenium.webdriver.common.keys import Keys
from selenium.webdriver import ActionChains
import time
driver = webdriver.Remote(command_exec
浏览 5提问于2018-05-11得票数 1
我正在尝试使用selenium和从以下三个网站使用beautifulsoup刮取表：
对于所有三个网站，结果是HTML代码的表，但没有文本。
我的代码如下：
import requests
from bs4 import BeautifulSoup
import pyodbc
import datetime
from selenium import webdriver
PATH = r'C:\Users\xxxxxx\AppData\Local\chromedriver.exe'
driver = webdriver.Chrome(PATH)
driver
浏览 8提问于2021-09-29得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
实时音视频
云直播
对象存储活动推荐
腾讯云开发者
