如何用BeautifulSoup获取某个类下的所有标签(带内容)？

BeautifulSoup是一个Python库，用于从HTML或XML文档中提取数据。要获取某个类下的所有标签（带内容），可以使用BeautifulSoup的find_all方法结合CSS选择器来实现。

首先，需要安装BeautifulSoup库。可以使用以下命令在命令行中安装：

pip install beautifulsoup4

接下来，导入BeautifulSoup库和要解析的HTML文档：

from bs4 import BeautifulSoup

html = """
<html>
<body>
<div class="my-class">
    <p>第一个标签</p>
    <p>第二个标签</p>
    <p>第三个标签</p>
</div>
</body>
</html>
"""

然后，创建BeautifulSoup对象并使用find_all方法获取指定类下的所有标签：

soup = BeautifulSoup(html, 'html.parser')
tags = soup.find_all(class_="my-class")

在上面的代码中，我们使用class_参数指定要查找的类名为"my-class"。find_all方法将返回一个包含所有匹配标签的列表。

最后，可以遍历这个列表并打印每个标签的内容：

for tag in tags:
    print(tag.text)

这将输出：

第一个标签
第二个标签
第三个标签

推荐的腾讯云相关产品：腾讯云服务器（CVM），产品介绍链接地址：https://cloud.tencent.com/product/cvm

如何用BeautifulSoup获取某个类下的所有标签(带内容)？

python、html、beautifulsoup、html-parsing

我的soup元素中有一个类，它描述了一个单元。现在我想删除<div class="ats-description">，只保留所有的内部标记(保留文本结构)。该怎么做呢？soup.select(".ats-description")[0].getText()给了我里面的所有文本，如下所示：但是删除了<e

浏览 81提问于2021-02-17得票数 0

回答已采纳

2回答

使用BeautifulSoup进行网页抓取

python、web-scraping、beautifulsoup、scrape

我想从这个链接中删除国家名称和国家首都：from bs4 import BeautifulSoupsoup = BeautifulSoup(html, "htm

浏览 1提问于2015-11-20得票数 0

2回答

使用Python和BeautifulSoup解析表

python、html、parsing、beautifulsoup

我正在尝试使用Python和BeautifulSoup访问某些td标签中的内容。我可以获得满足条件的第一个td标记(使用find)，也可以获取所有的td标记(使用findAll)。现在，我可以只使用findAll，获取所有内容，并从中获取我想要的内容，但这似乎效率很低(即使我对搜索进行了限制)。有没有办法转到满足我想要的条件的<

浏览 0提问于2011-06-21得票数 1

回答已采纳

2回答

将类方法的作用域限定为current_user

ruby-on-rails、ruby-on-rails-3

我正在实现一个标记系统，我在查询带作用域的标记对象时遇到了问题。def self.tagged_with(name)end 然而，这有一个问题。如果我这样做：current_user.items.tagged_with(name)，这个现有方法不会返回所有项，而不仅仅是current_

浏览 3提问于2013-02-20得票数 0

回答已采纳

1回答

如何从Google plus如facebook获取用户的帖子和更新

iphone、ios、objective-c、ipad、google-plus

我想得到所有的墙上更新用户的谷歌加帐户，如facebook。我已经看到了它的官方链接它可以很好地获取用户的信息，如电子邮件id、个人资料名称、用户的带图片的好友列表，并发布到google plus上。但是我没有得到用户的帖子和更新。所有我想要的是用户的墙更新&用户的朋友从google

浏览 2提问于2013-07-16得票数 0

3回答

刮擦问题。为什么没有数据被刮掉？

python、html、css、web-scraping

import requestspage = requests.get(URL) soup = BeautifulSoup(page.content, 'html.parser') wordsp', class_="e

浏览 4提问于2021-05-19得票数 0

回答已采纳

2回答

在Spring Security的PreAuthorize标注中使用permitAll()的目的

java、security、spring-security、annotations、spring-annotations

作为spring安全框架的新手，我想知道为什么我们要在方法中使用@PreAuthorize("permitAll()")？文档说明permitAll的计算结果始终为true。开发人员将permitAll()更改为特定的权限check.What这里的含义是什么？因为我不太确定permitAll()是如何工作的，所以我不能判断代码更改背后的逻辑。在我看来，开发人员添加了特定的权限检查，并将null作为身份验证对象进行传递。有人能解释一下

浏览 11提问于2015-06-26得票数 4

回答已采纳

3回答

仅计算HTML页面中的内容

python、html

有没有什么办法，我可以通过在浏览器中查看显示给用户的内容来解析网站？也就是说，我不需要下载"page.htm"l并开始解析包含所有HTML/javascript标记的整个页面，而是能够检索在浏览器中显示给用户的版本。我想“爬行”网站，并根据关键字的受欢迎程度排名(查看HTML源代码版本是有问题的)。乔尔

浏览 0提问于2010-09-11得票数 0

回答已采纳

1回答

PythonBeautiful外地get_text()没有获得所有文本

python、html、python-2.7、beautifulsoup、urllib2

我正在尝试使用get_text()方法从html标记中获取所有文本。我使用Python2.7和Beautiful外地4.4.0。它在大多数情况下都有效。但是，这种方法有时只能从标签中获取第一段。from bs4 import BeautifulSoup job_url = "http://www.indeed.com/viewjob?text = soup.find("span", {"

浏览 5提问于2015-09-19得票数 4

回答已采纳

2回答

使用BeautifulSoup进行网页抓取将不起作用

javascript、python、class、web-scraping、beautifulsoup

最终，我试图打开一个新闻网站的所有文章，然后将所有文章中使用的词排在前10名。要做到这一点，我首先想看看有多少文章，这样我就可以在某个时候迭代它们，还没有真正弄清楚我想要如何做每件事。为此，我想使用BeautifulSoup4。我想我想要获取的类是Javascript，因为我没有得到任何东西。这是我的代码： url = "http://ad.nl" ad = requests.

浏览 17提问于2020-04-19得票数 2

回答已采纳

3回答

当标签为空时，用Beautifulsoup填充值

python、html、parsing、beautifulsoup、tags

我试图解析出网页中某个类的所有td标签的内容，但我希望有某种占位符内容，即使标签本身没有任何占位符内容。例如，html包含如下的td标记：<td class="odds bdevtt moneyli

浏览 5提问于2020-01-01得票数 1

1回答

未显示BeautifulSoup4标记内容

html、python-3.x、beautifulsoup

我试着从一个网站上抓取一些数据，发现BeautifulSoup4并没有像我期望的那样显示全部内容。在下面的第一个示例中，一切运行正常。在找到带有类"title“的标签后，它显示它在内容中有两个元素(NavigableText: Bag of Holding和Span tag)。不幸的是，在第二种情况下，以同样的方式找到标题，它返回的内容只有1个元素，我预计会有3个元素。我

浏览 15提问于2020-09-08得票数 0

1回答

使用beautifulsoup4解析xml文件

python、beautifulsoup

我只想从profile name="4“中提取这个内容标签。我在下面编写了一段代码，它提取了配置文件名称= "4“下的所有内容，但是有什么方法可以从中收集所有的内容标签吗?或者，我必须使用split来获取内容标签中的文本。我拥有的xml文件要长得多，所以使用拆分是可行的，但是解析数据需要花费更长的时间。bs4

浏览 1提问于2018-10-12得票数 0

回答已采纳

5回答

Python BeautifulSoup网络爬网获取链接中的文本标记

python、beautifulsoup、web-crawler

我需要获取每个网站的"< b >“标记中的信息。response = requests.get(href) tempWeekend = []soup.

浏览 0提问于2015-06-27得票数 0

2回答

Beautiful Soup允许div (或其他过滤器)排除html代码吗？

python、beautifulsoup

我正在尝试解析编写得非常糟糕的代码，在解析所需内容时没有适当的标签、id、类或任何其他内容。我正在寻找的是一个select或findall一个id中不是某个类的所有东西。根据下面的示例代码，我需要id-main中没有包含在class-toc-indentation中的所有内容。下面我有main_txt和toc_txt，虽然我的

浏览 0提问于2013-12-13得票数 4

2回答

从BS4 ResultSet中删除元素，如果它们位于另一个BS4 ResultSet中

python、jquery、web-scraping、beautifulsoup、list-comprehension

我正试着制作一个网络爬虫-刮刀器来获取新闻。我希望删除特定类中的元素。但是，问题是这个类嵌套在另一个类中。守则如下：from bs4 import BeautifulSoup url = 'https://www.moneyreview.gr/life-and-arts/我想从文章中删除这个文本和所有twitter标签等等，这样我就有了一个干净的文本

浏览 15提问于2022-08-27得票数 1

回答已采纳

13回答

美汤与按ID抽取div及其内容

python、beautifulsoup

</div>标签和中间的东西呢？它不返回任何内容。(编辑：我发现BeautifulSoup没有正确解析我的页面，这可能意味着我试图解析的页面格式不正确。)

浏览 65提问于2010-01-26得票数 188

回答已采纳

1回答

解析HTML文件BeautifulSoup

python、html、parsing、beautifulsoup

我试图用html解析本地BeautifulSoup文件，但在导航树时遇到了问题。该文件的格式如下： <h1> </h1> <div class="thread">对于每一个div class='message' 后面的

浏览 2提问于2015-07-31得票数 0

1回答

用BeautifulSoup去掉html的脚本和样式标签？

python、html-parsing、beautifulsoup、python-2.6

我有一个简单的脚本，我在其中获取一个HTML页面，将其传递给BeautifulSoup以删除所有脚本和样式标记，然后我希望将HTML结果传递给另一个方法。有什么简单的方法可以做到这一点吗？浏览一下BeautifulSoup.py，我还没看过呢。()text = loader.extract_text(contents) contents = soup.html.contents只获取一个列表

浏览 1提问于2010-10-06得票数 8

回答已采纳

2回答