腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
2
回答
Web
抓取
使用
Beautiful
Soup
,
在
没有
类
的
情况下
抓取
多个
元素
python
、
web-scraping
、
beautifulsoup
但如果我
使用
find_all('a'),那么它也会
使用
Dev Patel,Freida Pinto等演员
的
名字。我不能
使用
find_all('a')1和find_all('a')2,因为对于其他电影,可能只有一个导演。唯一能区分演员和导演
的
就是
类
幽灵
的
跨度标记。
浏览 24
提问于2020-10-12
得票数 2
回答已采纳
1
回答
自动搜索网站价格
python
、
authentication
、
web
我想做一个程序,得到一个网站
的
网址,并在其中搜索有一定成本
的
项目。关于我可以
使用
的
库,你对初学者有什么建议和指导吗?我尝试了requests库,但它不起作用。
浏览 12
提问于2020-09-09
得票数 0
1
回答
我如何弄清楚给定网页
的
主题?与Ad Sense
的
功能类似
semantics
、
adsense
我需要弄清楚页面内容是关于什么
的
。类似于google adsense所做
的
事情。 例如,如果我有一个关于狗
的
网页,我需要弄清楚这个网页是关于狗
的
(第三方网站),这样我就可以建议狗散步服务。
浏览 3
提问于2010-03-05
得票数 2
2
回答
有
没有
办法
使用
Selenium of
Beautiful
Soup
得到2015-2020年间每年1月份
的
“这个家”
的
Z值?
python
、
selenium
、
selenium-webdriver
、
web-scraping
、
beautifulsoup
从下面的链接中,我希望能够
抓取
数据。然而,当我
使用
Beautiful
Soup
时,我
在
html中找不到它,并且
Beautiful
soup
不起作用。此外,我想也许我可以
使用
selenium来
抓取
这些数据,但我也找不到这些内容。你知道我会如何
使用
selenium或
Beautiful
Soup
来获得2015-2020年间每年1月
的
“这个家”
的
Z估计值
浏览 0
提问于2020-08-17
得票数 1
2
回答
有
没有
办法从另一个网页上
的
HTML表格中提取数据?
html
我很好奇,是否有一种方法可以让计算机读取这些数据,并将其输入到计算机程序中,这样你就可以
使用
这些数据。例如,如果我可以访问ESPN
的
网站,查看联赛排名并将记录发送到我
的
代码,我想这是可能
的
。我知道有些网站有你可以
使用
的
API,但我会
使用
它
的
网站
没有
…
浏览 1
提问于2016-07-07
得票数 0
1
回答
如何让django项目点击url
的
特定标签
python
、
python-3.x
我正在开发一个
使用
python和Django
的
网页
抓取
代码。我已经提供了所需
的
url,并且已经获取了数据。但是
在
url上有一个标签,上面写着“显示更多结果”。如何让我Django项目点击url上
的
“显示更多结果”选项卡并立即获取新
的
结果。 我已经
使用
Beautiful
Soup
库来进行
web
抓取
/
浏览 16
提问于2021-04-15
得票数 0
1
回答
使用
Beautiful
Soup
在
python中进行
Web
抓取
python
、
dataframe
、
web-scraping
、
data-science
、
web-scraping-language
我一直
在
尝试搜集一个项目的新房产信息。下面是我
的
代码:prices = []bhk = []for post in item: title
浏览 10
提问于2020-05-19
得票数 0
1
回答
在
搜索Google时转到下一页
python
、
python-3.x
、
web-scraping
、
beautifulsoup
我正试着在网上搜索谷歌酒店上
的
酒店列表。然而,我找不到一种方法绕过谷歌
的
分页,因为URL几乎保持不变,只是有一些事情发生了变化。我想知道这里有
没有
人以前通过过这个问题? 我已经成功地从第一页
抓取
了数据,但我需要为那里
的
每一页做这件事 请看下面我的当前代码。= BeautifulSoup(page.text, 'lxml') for hotel in hotels:ge
浏览 10
提问于2019-12-18
得票数 0
1
回答
如何
使用
python从html文件中
的
javascript语句中提取这些文本
javascript
、
python
、
html
、
package
、
web-scraping
我对网络
抓取
编码是个新手。我
使用
python解析html文件,我
使用
的
包是BeautifulSoup。现在,我想提取特定
的
数字,比如$mwidgetHelper.setTitle('Posts (1)')中
的
1,$mwidgetHelper.setTitle('Notes (1)')中
的
1,以及这个html文件中hover_boxes.hoverize_link('user_638166_451203',
浏览 0
提问于2013-07-16
得票数 0
回答已采纳
1
回答
Python 3.6美丽
的
汤-
在
Web
抓取
过程中获取嵌入式视频URL
的
麻烦
python
、
web-scraping
、
beautifulsoup
、
python-requests
、
embedded-video
我正在尝试
抓取
一个网页,并
使用
Python3.6中
的
Beautiful
Soup
和requests模块检索网页上嵌入
的
视频
的
URL。当我
在
Chrome中查看网页上
的
超文本标记语言时,我可以看到视频
的
.mp4链接。但是当我
使用
requests和
Beautiful
Soup
获取页面时,我找不到"video“节点。我知道视频窗口是一个嵌套
的
H
浏览 25
提问于2020-08-26
得票数 4
2
回答
在
Python中将
抓取
的
数据存储到文本文件中
python
、
web-scraping
我可以
使用
Beautifulsoup
抓取
数据,现在我希望生成一个文件,其中包含我
使用
Beautiful
Soup
抓取
的
所有数据。file = open("copy.txt", "w") datafile.close()我
在
文本文件中看不到所有的标签和全部内容。有关于如何实
浏览 0
提问于2019-12-28
得票数 1
1
回答
美丽
的
汤-
在
文档
的
两个部分之间进行搜索
beautifulsoup
是否可以只对页面上两个字符串之间包含
的
内容运行
Beautiful
Soup
?
在
反复遇到
使用
Yahoo Pipes进行截屏
的
限制后,我开始
使用
Beautiful
Soup
,部分原因是Scraperwiki上提供了托管版本。Yahoo Pipes中
的
HTML Import块
的
一个方便之处在于,它允许您标识开始字符串和结束字符串,因此可以将
抓取
限制
在
页面的特定区域。我<
浏览 0
提问于2010-11-04
得票数 1
1
回答
使用
BS4
的
Python语言中
的
WebScraping -获取动态生成
的
列表
python
、
web-scraping
、
dynamic
我需要
抓取
这个列表中
的
“最佳编码训练营”列表:https://www.switchup.org/rankings/best-coding-bootcamps 我
的
任务是应该可以
使用
Beautiful
Soup
(而不是Selenium),然而,当我尝试这样做时,结果HTML不会返回训练营
的
列表,而是返回一个似乎是
类
的
空
元素
: 我
的
问题是,您认为只有
使
浏览 6
提问于2019-12-08
得票数 1
回答已采纳
1
回答
在
Python中
使用
Beautiful
Soup
抓取
多个
同名
的
div
类
python
、
for-loop
、
web-scraping
、
beautifulsoup
我已经成功地
抓取
了一个网页
的
图像和标题(代码中
的
URL)。我想为这个页面上
的
所有电影做这件事。'movie_list‘包含了所有这些信息,但只
抓取
了第一个电影信息。url = 'https://5movies.to/movie/'
soup
= BeautifulSoup(content, "html.parse
浏览 27
提问于2020-02-15
得票数 0
回答已采纳
2
回答
如何从
Beautiful
Soup
获取URL?
javascript
、
python
、
html
、
beautifulsoup
、
html-parsing
我是Python
的
新手,正在尝试编写一个爬行程序;我想
使用
Beautiful
Soup
从BBC新闻中
抓取
一些数据。 <span>World&l
浏览 2
提问于2016-05-03
得票数 3
2
回答
使用
BeautifulSoup查找所选选项
python
、
beautifulsoup
我只想获取select
的
选定选项。selected>2007/12</option>我知道我能做到但这是
在
返回所有的选项有
没有
一种方法可以获取属性所在
的
所有
元素
?请注意,我请求所有,因为我
抓取
的
站点确实包含
多个</e
浏览 2
提问于2013-02-14
得票数 14
7
回答
用Python 3和示例解析HTML
的
最佳库?
python-3.x
我对Python完全陌生,并且
在
Windows上
使用
Python3.1 (pywin)。我需要解析一些HTML,本质上是特定HTML标记之间
的
额外值,并且对我
的
选项数组感到困惑,我发现
的
所有东西都适合Python2.x。我读过关于
Beautiful
、HTML5Lib和lxml
的
文章,但是我不知道如何在Windows上安装它们。
浏览 13
提问于2010-03-24
得票数 26
回答已采纳
1
回答
可以
在
web
应用程序中
使用
Selenium吗?
selenium
我正在建立一个
在
Django
的
网站,将从一些网站
抓取
数据,这样人们就可以进入该网站,设置自定义数据过滤器,并查看
抓取
的
数据
在
友好
的
格式。问题是requests和
beautiful
soup
模块不足以满足
抓取
目的,因为我还需要一些自动化操作(加载javascript或单击按钮)。由于Selenium要求下载webdriver并将其放入路径中,是否可以
在
web
应用程序中
使用</
浏览 3
提问于2018-07-01
得票数 1
2
回答
使用
Python BeautifulSoup从网页中
抓取
没有
id或
类
的
元素
python
、
beautifulsoup
如果
元素
有id或class,我知道如何从网页中
抓取
数据。 title = item.string如果
元素
没有
id或
类
,我们该如何做呢?例如,
没有</
浏览 0
提问于2015-12-19
得票数 2
回答已采纳
4
回答
在
div
类
中查找值
python
、
beautifulsoup
我正在解析一个网站,在那里我遇到了一些类似的东西: <div class = "class-name" data-fmid="somenumber">
使用
beautiful
soup
,如何提取somenumber我目前正在获取与class-name相关
的
元素
:
soup
.find_all('div', {'class':'classname'}) 但不确定如何获得&quo
浏览 41
提问于2019-03-10
得票数 1
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
Python基础教程 Beautiful Soup
推荐:手把手教你用Python进行Web抓取
手把手教你用Python进行Web抓取
用Python做网页爬虫
使用Python进行网页抓取的介绍
热门
标签
更多标签
活动推荐
运营活动
广告
关闭
领券