腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(5729)
视频
沙龙
3
回答
如何转到
Python
Selenium
的
下一
页
?
python
、
python-3.x
、
selenium
、
screen-scraping
、
webdriverwait
我正在尝试建立一个特定网站
的
代理刮板,但我在移动到
下一
页
失败。from
selenium
import
webdriver
from
selenium
.
webdriver
.
chrome
.options= True #
浏览 1
提问于2018-12-28
得票数 4
回答已采纳
2
回答
使用
python
selenium
chrome
webdriver
导航
到
javascript
表
的
下一
页
javascript
、
python
、
web-scraping
、
selenium-chromedriver
我
的
目标是遍历每个页面并将内容抓取到一个DataFrame中。到目前为止,我可以得到前20个没有问题。我似乎想不出如何
使用
python
selenium
chrome
webdriver
在
javascript
表格上
导航
到
下一
页
。我已经尝试了一些解决方案(下面似乎是最接近
的
),但无法复制结果。我会张贴
的
网站,但它是一个你需要登录凭证才能访问。提供了相关ul和li元素
浏览 18
提问于2021-04-25
得票数 0
1
回答
在带额外随机数
的
分页站点上迭代
Selenium
python
、
selenium
、
selenium-webdriver
、
web-scraping
、
selenium-chromedriver
我想刮
的
网站是分页
的
,但我不能只是重复页面,因为每个
下一
页
都有一些额外
的
随机数在其中。 (第二
页
)
浏览 4
提问于2022-06-22
得票数 1
回答已采纳
2
回答
如何仅从
使用
selenium
的
链接列表中获取具有特定id
的
链接
python
、
selenium
、
selenium-webdriver
、
web-scraping
我是
selenium
框架
的
新手,我必须说它是一个很棒
的
库。
使用
分页
的
示例链接。from
selenium
.
webdriver
import
Chrome
, ChromeOptionsimporttimefrom
selenium
.
webdriver
.support.u
浏览 6
提问于2022-07-29
得票数 0
1
回答
有没有一个很好
的
方法来循环遍历由
javascript
pageNav值定义
的
上百个页面?
python
、
selenium
、
web-scraping
我正在做一个网络抓取项目,我试图爬行通过数百
页
的
搜索结果,并将每个页面上显示
的
100个链接
的
ID存储
到
一个列表中。我已经存储了第一
页
的
链接I,但我正在寻找一种有效
的
方式来移动到
下一
页
,存储I,移动到
下一
页
,存储I等。我已附加我的当前代码存储在第一
页
上
的
I,以及搜索结果
的
页面
导航
网站
的
代码截图。
浏览 0
提问于2021-02-04
得票数 0
2
回答
使用
Python
迭代时StaleElementException
python
、
selenium
、
xpath
、
webdriverwait
、
staleelementreferenceexception
我正试图为Amazon
的
结果创建一个基本
的
web刮刀。当我迭代结果时,我有时会到达结果
的
第5
页
(有时只是第2
页
),然后抛出一个StaleElementException。当我在抛出异常后查看浏览器时,我可以看到驱动程序/页面没有向下滚动到页码所在
的
地方(底部栏)。我
的
代码: driver.get('https://www.amazon.com/s/ref=nb_sb_noss_1?to next page
浏览 2
提问于2018-12-05
得票数 3
1
回答
在
selenium
中
使用
Click()时,页面中
的
动态元素(
表
)不会更新,因此无法检索新数据
python
、
selenium
、
web-scraping
页面,我需要它从:中刮取数据允许在每个
表
中只显示100行,因此我必须
使用
在多个
表
之间移动。上转到
下一
个
表
结果。请记住,没有打开新页面,单击将被某种
JavaScript
拦截,以便在同一
页
上执行一些丰富
的
UI操作,以加载新
的
数据
表
。我
的
期望 我只是试图验证我是否可以移动到
下一
个
表
,然后我将编辑代码以遍历所有这些
表
。这段代码应该从结果返回第二个
浏览 1
提问于2020-12-12
得票数 2
3
回答
Python
抓取?
python
、
selenium
、
web-scraping
我正试图浏览一个包含纽约股票
的
网站。 from
selenium
.
webdriver
.
浏览 2
提问于2017-05-16
得票数 0
回答已采纳
3
回答
怎样才能到达这个网站上
的
下一
个网页?
python
、
python-2.7
、
selenium
、
web-scraping
我正在尝试进入
JavaScript
动态站点
的
下一
页
。我一直试图激活到
下一
页
的
元素是:在这个网站上:<div class="pagination怎样才能到达
下一
页
?_parent.execute(com
浏览 0
提问于2017-10-26
得票数 0
回答已采纳
1
回答
运行
selenium
后两个
chrome
窗口和意外退出
python
、
selenium
、
selenium-webdriver
、
webdriver
、
selenium-chromedriver
它们看起来是这样
的
:import g_
webdriver
g_
webdriver
.py def run_
chro
浏览 1
提问于2020-11-11
得票数 0
回答已采纳
1
回答
无法单击
下一
页
进行网页抓取
python
、
html
、
selenium
、
selenium-webdriver
、
web-scraping
我试着从这个网站上刮取学校
的
数据 单击"Cari Sekolah“按钮,转到第一
页
进行刮除。 我似乎想不出一种方法来单击
下一
页
来从其他页面加载条目。单击
下一
页
时,url不会更改。不同页面的HTML代码如下所示:这是我
的
代码: from
se
浏览 1
提问于2020-04-02
得票数 1
回答已采纳
1
回答
Selenium
+
Python
。在
下一
页
上重复解析操作不起作用
python
、
python-3.x
、
selenium
、
beautifulsoup
所以我试图完成
的
是
使用
Beautiful Soup解析并提取页面信息,然后
使用
Selenium
导航
到
下一
页
,重复此操作,直到没有
下一
页
。_execute(Command.CLICK_ELEMENT) File "C:\Program Files\
Python
35\lib\site-packages\
selenium
\
webdriver
\_parent.e
浏览 2
提问于2016-12-13
得票数 0
2
回答
刮刀无法从
下一
页
中获取名称
python
、
python-3.x
、
selenium
、
selenium-webdriver
、
web-scraping
我用
python
和
selenium
一起编写了一个脚本来解析网页上
的
名称。该站点
的
数据未启用
javascript
。但是,
下一
个页面链接在
javascript
中。因为如果我
使用
requests库,那么该网页
的
下一
个页面链接就没用了,所以我已经
使用
selenium
来解析来自该站点
的
25
页
数据。
下一
个页面链接看起来与
javasc
浏览 3
提问于2017-10-16
得票数 1
回答已采纳
2
回答
我需要
使用
Selenium
单击javascrip按钮
python-3.x
、
selenium
我是
Python
的
新手,我需要点击
javascript
按钮,但我不知道怎么做。我写了这个:from
selenium
.common.exceptions import NoSuchElementException
chrome
_path= r'C:\Users\fritz\Desktop\
python
\chromedri
浏览 0
提问于2020-08-26
得票数 1
回答已采纳
1
回答
无法转到
下一
页
python
、
python-3.x
、
selenium
、
selenium-webdriver
、
web-scraping
我
使用
selenium
用
python
编写了一个脚本,可以遍历不同
的
页面,从第一
页
开始一直到分页。但是,除了一些数字之外,
下一
页
按钮没有其他选项。当我点击这个数字时,它会把我带到
下一
页
。不管怎样,当我尝试用我
的
脚本这样做
的
时候,它确实点击了第二
页
,然后转到那里,但它不再滑动了,我
的
意思是,它不是继续
到
第三
页
,而是中断,抛出以下错误
浏览 6
提问于2017-08-15
得票数 3
回答已采纳
3
回答
如何从子类别中
的
所有页面获取所有产品(
python
、amazon)
python
、
selenium
、
amazon
如何从子类别中
的
所有页面获取所有产品?我附加了这个程序。现在我
的
程序只从第一
页
开始。我想从所有+400
页
获得该子类别的所有产品,以便
到
下一
页
提取所有产品,然后到
下一
页
等,我将感谢任何帮助。from
selenium
import
webdriver
from
selenium
.
webdriver
.comm
浏览 4
提问于2018-01-31
得票数 2
回答已采纳
1
回答
当我运行我
的
代码时,它返回'[]‘。我该如何解决这个问题呢?
python
、
web-scraping
、
beautifulsoup
、
python-requests
我在stackoverflow中
的
第一个问题。我是
python
的
初学者,我想请求任何instagram喜欢
的
照片,但我
的
代码返回空 import requestsdata = soup.findAll("div",{"class","Nm9Fw"}) p
浏览 14
提问于2019-01-09
得票数 1
1
回答
不再显示弹出
的
selenium
导航
到
"href“URL。
python
、
python-3.x
、
selenium
、
selenium-webdriver
、
selenium-chromedriver
我有一个
python
脚本。当它尝试点击"“站点语言更改按钮时,
使用
selenium
导航
到
"href”URL。我不
导航
到
"href“URL,我想看到以下弹出时,按钮被点击。from
selenium
import
webdriver
from
selenium
.
webdriver
.support import expected
浏览 3
提问于2022-10-11
得票数 -1
1
回答
Python
(
Selenium
) -如何将第1
页
到最后一
页
的
数据保存到同一CSV
python
、
html
、
selenium
我有一个网页,我需要通过
使用
Python
与
selenium
从第一
页
到最后一
页
嵌入
表
中
的
所有数据。我需要帮助使代码转到
下一
页
,直到它到达最后一
页
。挑战在于,这个网页没有像“
下一
步”或“上一步”那样
的
导航
按钮,而是有编号
的
索引作为
导航
按钮。因此,很难在逻辑中应用HTML元素。 另外,如何将每个页面的数据保存到同一个.
浏览 10
提问于2020-02-08
得票数 0
回答已采纳
1
回答
用多
页
从
表
中抓取数据
python
、
web-scraping
、
data-extraction
表
被分成11
页
,但是所有的页面都
使用
相同
的
url。我对webscraping (或者一般
的
python
)非常陌生,但是AGMARKNET没有公共API,所以抓取页面似乎是我唯一
的
选择。我目前正在
使用
BeautifulSoup解析HTML代码,并且我能够刮取初始
表
,但这只包含前500个数据点,但我想要完整
的
11
页
数据。我被困住了也很沮丧。链接和我的当前代码如下。任何方向都会有帮助
的
浏览 11
提问于2022-10-18
得票数 0
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
如何使用selenium+Python配置搭建环境
使用多个Python库开发网页爬虫(二)
Python爬虫实例
Python爬虫三-用selenium+pyquery+mongodb来爬取淘宝美食
1分钟,快速使用selenium定位相同元素
热门
标签
更多标签
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
活动推荐
运营活动
广告
关闭
领券