1回答
我目前正在使用Python进行web抓取。我使用了Selenium和Beautifulsoup库来抓取。我最近知道Selenium适用于php/Laravel。我的问题是，我可以使用Laravel + Selenium web驱动程序抓取web吗？如果是，你能给我提供一些链接或存储库，以便我学习吗？我被迫在我的抓取工作中使用php&#x
浏览 19提问于2019-11-19得票数 0
1回答
我想从这个动态网站中提取一些信息，其中包含selenium和jsoup。要获取我想要提取的信息，我必须单击"Details ffnen“按钮。我最初尝试只使用Jsoup提取信息，但是当我被告知Jsoup不能处理动态内容时，我现在尝试使用selenium和Jsoup提取信息，就像您在源代码中看到的那样。但是，我并不确定selenium是否是正确的，所以也许还有其他方法来提取我需要的更简单的信息，但是使用Java可以完成这一点是很重要的。接下来的两张图片显示了在单击该按钮之前和单击
浏览 3提问于2014-12-31得票数 3
要获取特定月份的数据，首先必须选择城市名称、月份和年份。
有63个城市，12个月，41年。
浏览 0提问于2020-10-04得票数 1
回答已采纳
有人建议我使用WebKit (如Ghost.py )来抓取数据，但在浏览器中模拟打开的选项卡使连接保持打开状态。
浏览 1提问于2015-08-12得票数 1
回答已采纳
我正在尝试使用python来抓取一个用无限滚动实现的网站。实际上，网络就是pinterest。我知道如何使用selenium来抓取具有无限滚动的web。但是，WebDriver基本上模仿了访问web的过程，而且速度慢得多，比使用BeautifulSoup和urllib进行抓取要慢很多。你知道有什么时间有效的方法来刮一个无限滚动的网页吗？谢谢。
浏览 0提问于2014-12-29得票数 0
回答已采纳
我正试图在基于地理定位的Instagram和Twitter上进行网络搜索。我可以运行一个查询搜索，但我在将网页重新加载到更多并将字段存储到数据帧方面遇到了挑战。我确实找到了几个没有API键的web抓取twitter和Instagram的例子。但它们是关于#标记关键字的。
我正试着在地理位置和旧的日期之间刮擦。到目前为止，我已经用python 3.X和anaconda中所有最新版本的包编写了代码。from selenium import
浏览 2提问于2017-03-26得票数 7
回答已采纳
在过去，我使用Slim来创建rest，但是现在我要做一个web刮刀。我已经有使用simple html dom parser的经验，但是我想知道Slim是否有解析器功能。
浏览 4提问于2016-03-07得票数 1
回答已采纳
3回答
是否有一个工具可以记录用户与DOM元素的交互，以用于创建自动化测试(我使用的是和，但任何在Selenium中使用根的工具都可以)。理想情况下，我可以说“倾听输入或文本区域、按钮或选择或选项上的每个焦点、单击和键盘事件”，并观察url的更改。
这样的工具存在吗？
浏览 1提问于2018-06-27得票数 9
1回答
2-当我看到带有浏览器(firefox和chrome)的“查看页面源”的页面源时，所有选项卡的页面源看起来也是相同的，而当我对其中一个选项卡使用“检查Elemnt”时，我看到我的目标内容以html形式显示的代码问题是，我无法通过python访问所需选项卡的内容，这是web世界中可用的典型WEB抓取代码。这些代码通常是基于bs4的。
有没有人有任何想法或示例代码来学习如何处理我的问题？
浏览 2提问于2020-02-06得票数 4
回答已采纳
但是，在做诸如清洁之类的日常工作时，携带笔记本电脑是非常令人恼火和恼人的。我对python知之甚少，所以如果有人能给我指出正确的方向，我将不胜感激。。任何和所有的建议都将非常感谢。提醒一下，我真的是python的新手。
浏览 3提问于2020-10-01得票数 0
嗨，我想保存作为csv和txt的数据，但是我不能。我如何重复这个过程多次？]/span[2]').click()“代码；”from selenium.webdriver.common.keys import Keys
from selenium.webdriver.commo
浏览 4提问于2022-07-04得票数 0
回答已采纳
我试图使用Selenium和chromdriver来擦拭这些数据(由红色标记显示)：下面是我的Python代码：from selenium.webdriver.chrome.optionsReturn，在等待很长时间后，它返回以下错误消息：
selenium.common.exceptions.InvalidSelectorException: Message: invalid selector从页面中获得Est Return值的
浏览 2提问于2020-03-21得票数 0
回答已采纳
我想打开一个页面，抓取屏幕，并使用PIL获取其平均颜色。我想打开大约100个页面，所以我认为使用Python的屏幕截图脚本会很有用。
浏览 0提问于2011-09-26得票数 1
回答已采纳
我现在正在执行一项任务，系统地从似乎是由javascript呈现的课程列表中抓取内容。我在web上使用PyQt4遵循了一些脚本，但失败了(我在下面复制了它)。然而，下面的网站(ouhk，我在下面的脚本中复制的链接)似乎没有指向特定内容的链接，即节目信息、节目结构和费用等。相反，它使用标签容器和FTP来存储和加载信息(我从其源代码中找到)。我想知道是否有任何方法可以修改以下脚本，以便我可以使用PyQt4抓取这些内容，或者我必须寻找其他方法来实现此目的？
浏览 17提问于2016-09-21得票数 3
2回答
我是编写代码的初学者，我试着学习用selenium进行网络抓取，我一直在做一个项目，用字典检查每个单词破解密码需要多长时间。program run spanish dictionary and check how secure password there are
import time
from selenium
浏览 1提问于2020-11-28得票数 1
回答已采纳
3回答
soup.find("div", {"class":"r_bodywrap"})
我现在遇到的问题不同于我抓取的简单网页在研究这个问题时，最接近的堆栈溢出问题如下：
在那篇文章中，他们解释说，Morningstar的表格是动态加载的，并使用了一些我不熟悉的json代码，并以某种方式生成了一个不同的网页链接，它设法抓取了数据
浏览 3提问于2016-02-27得票数 3
我试着用requests import requests
url = r'http://www.sse.com.cn/assortment/stock/list/info/announcement/index.shtml
浏览 14提问于2019-01-23得票数 4
我的目标是从网站上抓取信息，并将其存储在数据库中。这是一个有体育赛事和赔率的历史数据的网站。我感兴趣的是我能做些什么来改进和优化它。我最关注的是什么，我做错了什么？from selenium import webdriverfromselenium.webdriver.common.by import By
from selenium.we
浏览 0提问于2020-09-12得票数 5
回答已采纳
from selenium import webdriver
driver = webdriver.Chrome("C:\chromedriver_win32
浏览 0提问于2017-11-17得票数 1
云服务器
ICP备案
对象存储
云点播
实时音视频
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号