腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
搜索
搜索
关闭
发布
文章
问答
(9999+)
视频
沙龙
2
回答
如何
使用
Selenium
和
BeautifulSoup
进行
循环
、
、
、
、
我有一个要通过
循环
迭代的字符串列表。然而,我不确定
如何
为这个任务创建一个for
循环
。该函数从网站上抓取信息。根据“名称”,这些表有数万行。我该怎么做呢?我有一个列表: list = ['name1', 'name2', 'name3'] 下面是我的代码: import
selenium
from
selenium
.webdriver.suppo
浏览 5
提问于2019-04-12
得票数 1
回答已采纳
1
回答
从文本文件中读取多个URL,处理每个网页,并抓取其中的内容
、
、
、
、
当我尝试运行其他代码时,建议的请求结果显示“请打开JavaScript并刷新页面”,因此我打算
使用
Selenium
来解决这个问题。我能够按需要获取所有页面,但无法在每个链接中看到所需的内容。15175/index.htmlhttp://example.com/2267/17895/index.html 这是我
使用
Selenium
<e
浏览 0
提问于2020-09-27
得票数 1
回答已采纳
2
回答
如何
抓取youtube视频,以获得比一页更多的视频?
、
、
我正在
使用
BeautifulSoup
4来做到这一点。我已经成功地找到了视频网址。我面临的问题是,我想收集至少2000每个类别的视频链接。但有一次,YouTube只显示了20个视频。
如何
收集更多视频的网址?from bs4 import
BeautifulSoup
as bsBASE_SEARCH_URL
如何
收集更多视频的网址?
浏览 1
提问于2019-04-25
得票数 1
回答已采纳
1
回答
无法通过
BeautifulSoup
解析eBay中的元素
try:except:try: price_
selenium
= driver.find_element_by_xpath('//*[@id="prcIsum"]').text.strip(
浏览 5
提问于2019-11-09
得票数 0
回答已采纳
3
回答
使用
BeautifulSoup
从html中提取一个值
、
、
我试图
使用
bs4从这个HTML中检索一个值。我对数据抓取非常陌生,我试图找出一些方法来获得这个值,但是没有用。我看到的最接近的解决方案就是这个。">ROE</div></div>from bs4 import
BeautifulSoup
BS(html_content, 'lxml
浏览 6
提问于2021-09-08
得票数 1
回答已采纳
3
回答
用于web抓取的
Selenium
与
BeautifulSoup
、
、
、
我正在
使用
Python从一个网站上抓取内容。首先,我在Python上
使用
了
BeautifulSoup
和
Mechanize,但我看到网站上有一个通过JavaScript创建内容的按钮,所以我决定
使用
Selenium
。既然我可以通过像driver.find_element_by_xpath这样的方法
使用
Selenium
查找元素并获取它们的内容,那么当我可以
使用
Selenium
做任何事情时,还有什么理由
使用</em
浏览 1
提问于2013-07-03
得票数 53
回答已采纳
1
回答
Python web爬网结果小于预期
、
、
我已经将爬行代码放在while true
循环
之后,用于单击load more按钮。import timefrom
selenium
.webdriver.support.uiimport
BeautifulSoup
#data = soup.findAll(
浏览 0
提问于2021-05-18
得票数 0
1
回答
将元素从
BeautifulSoup
发送到
Selenium
、
、
我正在
使用
Selenium
浏览网页。为了分析元素和数据,我
使用
了
BeautifulSoup
,因为它们提供了很好的选项,包括
使用
正则表达式
进行
搜索。所以现在我在
BeautifulSoup
中找到了一个元素。我想在
Selenium
中选择它。 我想我可以通过某种方式将XPath或CSS选择器从
BeautifulSoup
元素传递到
Selenium
元素。有没有从
BeautifulSoup
元素到硒元素的直接方法?
浏览 4
提问于2015-09-28
得票数 3
1
回答
使用
Python
进行
web抓取
、
、
我需要在我的python代码中
使用
一个特定的网站(将英语翻译成我的语言),而且我也不想在python中
使用
googletrans,这是大量的数据,所以我需要
使用
python来快速完成它,是否有任何引用或标题比我能读到的
浏览 3
提问于2020-05-12
得票数 1
回答已采纳
1
回答
当我
使用
BeautifulSoup
进行
抓取时,这些不同的错误是什么?
、
、
、
import requestsfrom bs4 import
BeautifulSoup
pageSoup =
BeautifulSoup
我从阅读类似的问题中得到的一点是,我需要
使用
Selenium</
浏览 0
提问于2019-04-06
得票数 0
回答已采纳
3
回答
我可以同时
使用
BeautifulSoup
和
Selenium
吗?
、
、
成功登录并导航到“产品详细信息”页面后,
Selenium
将一无所获。在过去的一周里,我一直在努力,但什么也没有成功。所以,我想知道我是否可以尝试
BeautifulSoup
来获得我想要的文本,在达到这个点之后? 是可行的吗?请复述任何资料或阅读资料。
浏览 11
提问于2021-06-21
得票数 0
1
回答
Python,无法解析pintrest
、
我需要解析兴趣,但由于某些原因,而不是链接到图片,难以理解
和
不工作的链接出现。def parse(): r = requests.get(url) soup =
BeautifulSoup
浏览 6
提问于2022-09-03
得票数 0
1
回答
如何
让python请求或urllib2等待最终页面
、
我正在
使用
python请求和漂亮汤来验证一个html文档。但是,登录页面的服务器有一些后端代码,这些代码在呈现最终的html文档之前会延迟几秒钟。我尝试过redirect=true方法,但最终还是
使用
了原始文档。在浏览器上加载url时,服务器创建页面时会有2-3秒的延迟。
浏览 0
提问于2019-02-09
得票数 0
1
回答
在Python中打印
selenium
webelement的HTML文本
、
、
、
、
我正在
使用
Python中的
Selenium
webdriver
进行
web抓取项目。谢谢
浏览 19
提问于2011-11-30
得票数 5
回答已采纳
1
回答
如何
从一个网站的多个链接中抓取明文?
、
、
、
from bs4 import
BeautifulSoup
import pandas as pdimport jsonsauce = soup = bs.
BeautifulSoup
html.parser') soup.
浏览 0
提问于2018-10-08
得票数 0
2
回答
在Python3中
使用
Selenium
和
Request模块从网页中获取文件
、
、
、
以下是我遇到的问题的概述:我试图访问一个网页,并
使用
请求和
BeautifulSoup
模块解析整个站点,获取我需要的文件的URLS,并下载这些文件。因此,为了解决这个问题,我尝试
使用
Selenium
来更改report selections...which,除了无法从打开的
Selenium
浏览器实例中获取请求模块之外。因此,我似乎可以
使用
Request
和
BeautifulSoup
来获取“默认”页面下拉筛选器的信息,并且可以
使用
Se
浏览 2
提问于2017-01-07
得票数 1
1
回答
Selenium
下载完整的html页面
、
我正在学习
使用
Python
Selenium
和
BeautifulSoup
进行
web抓取。目前,我正在尝试抓取谷歌搜索趋势上的热门搜索from bs4 import
BeautifulSoup
browser = webdriver.Fire
浏览 1
提问于2013-05-17
得票数 15
1
回答
使用
Python
Selenium
在JavaScript中渲染页面
、
、
、
我正在
使用
Python Splinter
Selenium
(Chromedriver)
进行
网页抓取。它
如何
在
Selenium
中做到这一点呢?如果我不能,我应该
使用
什么库?下面是我所拥有的一个示例: import pandas as pdimport pymongo import requests
浏览 27
提问于2020-12-09
得票数 0
1
回答
程序自动单击聊天网站上的新按钮,直到用户名符合特定条件为止。
、
、
、
、
这是一个python程序,它
使用
python的
Selenium
Webdriver
和
BeautifulSoup
模块,自动跳过一个名为“与陌生人交谈”的聊天网站上的用户。第一部分
使用
selenium
打开浏览器。from
selenium
import webdriveruserName= 'null'
浏览 0
提问于2018-04-10
得票数 0
1
回答
在聊天网站上自动跳过用户直到用户名满足某些条件的程序(v.2.0)
、
、
、
这是一个Python程序,它
使用
python的
Selenium
和
BeautifulSoup
模块,自动跳过名为that的聊天网站上的用户。第一部分
使用
Selenium
打开浏览器:driver = webdriver.Chrome('C:\SeleniumDrivers\chromedriver.exe')driver.get(
浏览 0
提问于2018-05-17
得票数 2
点击加载更多
热门
标签
更多标签
云服务器
ICP备案
腾讯会议
云直播
对象存储
活动推荐
运营活动
广告
关闭
领券