腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
文章
问答
(5687)
视频
沙龙
2
回答
Python
Selenium
硬
网络
抓取
、
、
网址是:我需要获取列表AT、BDL-GB、BDL-NL、BE中包含的项目的完整列表...wait = WebDriverWait(driver, 20) first.click(
浏览 11
提问于2021-05-23
得票数 2
回答已采纳
1
回答
Python
请求/
Selenium
硬
抓取
表
、
、
、
网址是: 我需要获取/
抓取
并保存在jao.eu/auctions#中显示的表格('AUCTION SPECIFICATIONS & RESULTS'),这些表格是在我操作OUT AREA、in AREA
浏览 11
提问于2021-05-23
得票数 1
回答已采纳
2
回答
保存
Python
中url中的“另存为”重定向
、
、
这个下载链接似乎总是有效的,但我不知道如何用
Python
获取它。我已经找到了关于使用"Spynner“库的,但我不知道这将如何以及为什么会解决我的问题。 我正在使用
Python
3.8.2
浏览 0
提问于2020-05-06
得票数 1
回答已采纳
1
回答
Python
/
selenium
网络
抓取
、
我担心的是: 我正在尝试
抓取
一个网站。我正在使用
selenium
/
python
从跨度中剔除“501to1000名员工”和"Biotech &制药“,但我无法使用xpath.I从网站中提取文本元素。
浏览 10
提问于2017-07-30
得票数 1
回答已采纳
2
回答
使用
python
scrapy
抓取
动态内容
、
我想
抓取
这个链接中的“日历”内容:我想知道我是否可以在不使用
selenium
的情况下使用
python
scrapy来
抓取
这些内容。因为我无法从
网络
选项卡中找到任何信息。谢谢!
浏览 0
提问于2017-11-15
得票数 0
1
回答
为什么我的
网络
抓取
没有返回任何东西?
、
我对
python
上的web
抓取
是个新手。我有问题,当我运行我的代码,返回是白色空白,但它不是错误。
浏览 22
提问于2020-08-21
得票数 0
1
回答
如何知道你是否被屏蔽从一个网站的网页刮刮?
、
我在一个网站上使用了这个漂亮的汤代码:funda = "https://www.funda.nl/koop/amsterdam/"print(response) ht
浏览 6
提问于2019-11-01
得票数 0
回答已采纳
1
回答
使用
Python
对页面和浏览器扩展数据进行with
抓取
、
我正在尝试获取网页的文本数据,就像它在我的浏览器上的样子一样。我的问题是,我还使用了一个网页的扩展,它的给定数据(由于它而显示的文本)也要被收集。我知道urllib,但它只收集正常的网页数据,而不是扩展生成的数据。那么,如何收集这些数据有什么帮助吗?另外,我想问的是,这是否可能?
浏览 12
提问于2020-08-15
得票数 0
1
回答
selenium
或其他web刮刀工具对于从chrome到
python
脚本的数据刮取是必需的吗?
、
、
我在
python
脚本中使用
selenium
来
抓取
数据。但是我注意到,在Google的
网络
部分,Chrome可以记录XmlHttpRequest来查找网站的json/xml文件。因此,我想知道我能否在
python
脚本中直接使用这些数据,因为
selenium
很重,需要更多的带宽。
selenium
或其他web刮刀工具是否应该用作与浏览器通信的媒介?如果没有,请提供一些有关只使用chrome本身为我的
python
文件使用的刮取数据的信息。
浏览 0
提问于2019-06-09
得票数 0
2
回答
Python
-
Selenium
-
网络
抓取
表
、
、
、
、
import timefrom
selenium
.webdriver.common.keys import Keys from datetime
浏览 0
提问于2014-01-20
得票数 0
2
回答
selenium
中的webdriver.Firefox()和webdriver.Firefox(< gecko可执行文件的路径>)有什么不同?
、
、
、
、
我在
selenium
3中查找了
python
文档,但仍然无法理解这两种不同的驱动程序调用之间的区别。webdriver.Firefox() webdriver.Firefox(<path to gecko executable >) 什么时候使用
Selenium
?因为我正在做一个
网络
抓取
项目,这对我有很大的帮助。
浏览 0
提问于2018-09-06
得票数 0
2
回答
使用
selenium
/chromedriver阻止网页自动重载
、
、
我正在使用
python
和
selenium
包和chromedriver来
抓取
网页。页面每30分钟自动重新加载一次(可能是通过java-script),这会破坏我的
抓取
进度。
网络
抓取
是通过脚本和与页面进行进一步交互所需的javascript ist来完成的。 有没有可能通过chromedriver的标志来阻止页面重新加载呢?
浏览 24
提问于2020-11-13
得票数 0
回答已采纳
3
回答
使用
python
抓取
此网站
、
我是
网络
抓取
的新手,并试图
抓取
以下网站:提前感谢!
浏览 30
提问于2018-02-01
得票数 0
1
回答
WebDriver无法在
Python
上运行
、
、
、
、
我正在做一个
网络
抓取
项目,在这个项目中我必须刮掉一些LinkedIn信息,因此我在
Python
中使用
selenium
,我在
Python
中安装了
Selenium
,但是现在我尝试使用
Selenium
驱动程序来控制我的代码是:driver=webdriver.chrome("/Users/Intel/Desktop/chromedriver&qu
浏览 0
提问于2019-04-25
得票数 0
1
回答
如何使用X-path或其他方法在web元素中找到自定义选择器?
、
、
、
、
我正在使用
selenium
在
Python
上做一个
网络
爬行器,我想从一个div中
抓取
一个特定的元素(data-car-id),我可以使用Xpath找到这个元素。 ?
浏览 20
提问于2020-09-13
得票数 1
回答已采纳
1
回答
用
python
抓取
javascript驱动的“下一步”按钮的麻烦
、
、
我正在尝试
抓取
一个网站,以学习
python
和
网络
抓取
。特别是,我试图在这个页面上
抓取
足球数据: 我的主要问题是如何
抓取
主数据表的所有页面,而不仅仅是第一个页面。我正在尝试使用
selenium
并分析当我点击“下一步”按钮时我的浏览器发送的请求,但我遇到了一些问题。感谢您的关注。
浏览 2
提问于2018-08-30
得票数 1
1
回答
有没有任何快速的方法来刮一个有无限滚动的网站?
、
我正在尝试使用
python
来
抓取
一个用无限滚动实现的网站。实际上,
网络
就是pinterest。我知道如何使用
selenium
来
抓取
具有无限滚动的web。但是,WebDriver基本上模仿了访问web的过程,而且速度慢得多,比使用BeautifulSoup和urllib进行
抓取
要慢很多。你知道有什么时间有效的方法来刮一个无限滚动的网页吗?谢谢。
浏览 0
提问于2014-12-29
得票数 0
回答已采纳
2
回答
使用
Python
通过AJAX
抓取
网页
、
、
我知道使用
Python
的Beautiful Soup
抓取
HTML的基础知识。但是,页面会进行AJAX调用,以获取球员上场时间的数据。(我使用firebug识别了
网络
调用)。我的问题是:有没有可能使用
python
来“
抓取
”这些信息?我需要什么工具,除了HTML我还应该知道什么?(我目前正在阅读有关JavaScript和AJAX的文章)。更新:几天后,我提出了一个在
Python
语言中结合使用
Selenium
和PhantomJS的解决方案。基本上,我使用
Seleniu
浏览 0
提问于2013-11-02
得票数 0
1
回答
从
Selenium
WebDriver检索信息
、
使用
Python
从
selenium
(chrome驱动程序)检索信息以记录信息的可能性是什么?这不是关于
网络
抓取
,而是实际收集信息,由用户输入。from
selenium
import webdriverdriver = webdriver.Chrome('chromedriver.exe')driver.get(&qu
浏览 2
提问于2021-09-28
得票数 0
回答已采纳
2
回答
Geckodriver和Firefox在Raspberry Pi 3上兼容吗?
、
、
、
、
我正在尝试安装一个小程序,在我的树莓Pi 3上进行
网络
抓取
。非常感谢你的反馈!> File "/usr/local/lib/
python
2.7/dist-packages/
selenium
/webdriv
浏览 0
提问于2018-03-10
得票数 1
回答已采纳
点击加载更多
热门
标签
更多标签
云服务器
ICP备案
云直播
腾讯会议
实时音视频
活动推荐
运营活动
广告
关闭
领券