BeautifulSoup:获取未出现在html中的表？

文章/答案/技术大牛

发布

1回答

python、web-scraping、beautifulsoup

我想获取一个出现在https://www.coronavirus.vic.gov.au/exposure-sites上的表当右键单击并检查元素时，很明显有一个具有可引用类的表元素。可重现的例子： import pandas as pdfrom bs4 import BeautifulSoup "User-Agent":'https

浏览 12提问于2021-08-16得票数 0

回答已采纳

3回答

在python中使用re.sub()替换html代码

python、regex、str-replace

我想对我的html代码做一些小的修改来做一些格式化。如果我在python字符串中有下面的代码，我如何使用re.sub()函数来根据我的需要替换行。例如：在这种情况下，我试图在我的表中添加边框。tbody> <th>X</th> </tr><

浏览 5提问于2014-12-22得票数 0

回答已采纳

1回答

使用网页的Python解析的HTML与实际页面不同

python-3.x、web-scraping、beautifulsoup、html-parsing

我需要从表中获取和存储PM2.5和值。我使用BeautifulSoup4来抓取网页，但是我得到的解析HTML与实际页面不同。例如，我得到了这个而不是这个。我编写了获取表行和表数据等所需的代码，但是由于我分析过的HTML缺少表主体的行，所以它找不到它们，所以现在我只能看到分析过的HT

浏览 1提问于2020-07-23得票数 0

回答已采纳

1回答

从疯牛病网站提取数据

python、python-3.x、selenium、beautifulsoup、python-requests

如何使用Python3提取安全ID、安全代码、组/索引、Wtd.Avg价格、交易日期、交易量、可交付数量的百分比到交易数量的值，并将其保存到XLS文件中。下面是链接。 table = soup.find('div', attrs = {'id&

浏览 0提问于2018-03-07得票数 1

回答已采纳

2回答

查询所有缺少的ids。

sql、sqlite

我的数据库中有两张桌子，用户和馈赠。用户表获取id和数据，礼品表获得gift_id、user_id和数据。gitst.user_id与users.id相关联如何从未出现在“用户”表中的礼品表中获取所有user_id？

浏览 3提问于2015-12-02得票数 0

回答已采纳

1回答

为什么此代码中的http-响应的html文件不完整？

python、web-scraping、beautifulsoup、python-requests

我试图通过使用python和模块“”和"BeautifulSoup“从网站(BeautifulSoup)获取一些数据，但我似乎得到了一个不完整的html文件作为响应。例如，当我用浏览器检查html文件时，我得到的html文件中的表标记与原始html文件相比，在响应代码时缺少行数。所以我的问题是:原因是什么，我怎样才能解决这个问题？下面是我用来在表

浏览 1提问于2020-12-26得票数 0

回答已采纳

1回答

使用Python将网站解析为CSV文件

python、html、xml、csv

我使用以下内容作为指南，作为python的新手，我不知道如何在我的数据集上实现它。 import pandas as pd html = requests.get(url).contentdf = df_list[-1]df.to_csv('my d

浏览 0提问于2021-03-13得票数 2

1回答

<script>在<div id="xxxxx">下找不到

python、html、web-scraping、beautifulsoup

我在chrome浏览器上查看了开发工具，其中有我想在<script>中获得的信息，它位于我附加了元素图像的<div id="market-stats">下面。我使用了漂亮的汤来清除数据，但似乎<script>中的信息从未出现在终端中。我的假设是这部分信息可能不允许抓取？from bs4 import BeautifulSoup import r

浏览 2提问于2022-11-26得票数 0

回答已采纳

3回答

使用BeautifulSoup在注释标记中刮擦表

python、web-scraping、beautifulsoup

我正在尝试使用BeautifulSoup从以下网页中刮表：from bs4 import BeautifulSoup reference.com/boxscores/201702050atl.htm'html = page.text 页面上的大多数表都在注释标记中</e

浏览 7提问于2017-09-19得票数 0

回答已采纳

1回答

抓取Java网页

python、beautifulsoup、screen-scraping

我已经找到并阅读了相当多关于抓取的文章，但不知何故，作为一个初学者，我不知所措。我想从一个表()中获取数据有什么建议从哪里开始呢？下面是我获取选项

浏览 3提问于2019-02-19得票数 0

3回答

如何使用BeautifulSoup刮除非HTML标记

python、beautifulsoup

我正在尝试从一个标签为<a href="https: evisa.mfa.am ">的网站中获取数据，例如，看看这个<br/>2. Airlines must provide advance passenger&

浏览 0提问于2020-04-06得票数 0

回答已采纳

2回答

我想用Python从HTML文件中提取文本。我想要的输出基本上与从浏览器复制文本并将其粘贴到记事本中得到的输出相同。我想要一些比使用正则表达式更健壮的东西，因为正则表达式在格式不佳的HTML上可能会失败。我看到很多人推荐Beautiful Soup，但我在使用它时遇到了一些问题。首先，它会拾取不需要的文本，比如JavaScript源。而且，它不能解释HTML实体。例如，我希望将HTML源中的

浏览 0提问于2010-08-19得票数 2

回答已采纳

1回答

如何从urllib2中的python中的url中获取特定的标记数据

python-2.7、urllib2

我对python2.7非常陌生，我有一项任务要读取URL中的表。import urllib2 response = urllib2.urlopen('https://www.somewebsite.com/

浏览 3提问于2017-06-16得票数 2

回答已采纳

9回答

"TypeError:类型为‘响应’的对象没有len()“

python、web-scraping、beautifulsoup

当我试图执行代码时它给出了错误消息。TypeError:类型为“Response”的对象没有len() response = requests.get(url) soup = BeautifulSoup(html, "html</e

浏览 11提问于2016-04-19得票数 40

回答已采纳

1回答

当我使用BeautifulSoup进行抓取时，这些不同的错误是什么？

python-3.x、web-scraping、html-table、beautifulsoup

import requestsfrom bs4 import BeautifulSoup pageSoup = BeautifulSoup"> <html xmlns="http

浏览 0提问于2019-04-06得票数 0

回答已采纳

2回答

使用Python和BeautifulSoup从页面中获取表信息

python、html、beautifulsoup

我试图从获取信息的页面。我试图从“名册”表中获取所有的信息，但由于某种原因，我无法通过“美丽的灵魂”(BeautifulSoup.I)获得它。当我查看页面的HTML时，我可以在一个非常大的注释和一个常规的div中看到表。如何使用BeautifulSoup从这个表中获取信息？

浏览 3提问于2020-04-13得票数 0

回答已采纳

1回答

风车没有得到所有的html内容

python、screen-scraping、web-scraping、beautifulsoup、windmill

但是，我在从页面上获取HTML表内容时遇到问题。该表是由Javascript生成的-因此我使用Windmill来获取内容。但是，内容不返回表-如果我使用BeautifulSoup尝试解析内容，这会导致错误。(html['result'],markupMassage=my_massage)当您查看soup的输出时，表是缺失<em

浏览 3提问于2012-03-09得票数 0

回答已采纳

1回答

使用python从站点保存文本文件

python、web-scraping

使用Python，我的任务只是从这个站点获取html源代码-- --并将第一个文本文件保存在名为"corporate_action_rpt_20220621.txt“的表中，现在，我可以使用BeautifulSoup读取这一行html，如下所示： <a href="2022/06/bzx_equities_corporate_action_rpt_20220621.txt-dl"

浏览 10提问于2022-06-22得票数 0

回答已采纳

1回答

检索动态网页内容PyQt5

python、pyqt5

在能够登录到一个受保护的网站后，我想刮掉动态加载的相同网页的一些内容。这个代码块可以正确地处理身份验证，但是如果我尝试访问类名为lang-py的前标记元素，我会得到None作为输出返回给我。_html = "" password = "password" def _

浏览 18提问于2020-09-25得票数 0

回答已采纳

2回答

在获取table HTML数据时，如何在Selenium Python中获取一个没有文本值的```<td>```标记？

python、selenium

我需要得到HTML表的数据作为列表。该表有100列和50行。并不是每个<td>都有文本值，而且每一行都不同(不同列中的无文本值) 因此，当我使用row.text时，它会返回一个列表，忽略没有文本的列表。每一行的列表具有不同的长度。这不利于在excel文件中写入列表。如果我这样做的话，一个接一个的<td>组成一个列表。这太慢了。for row in driver.find

浏览 24提问于2019-06-10得票数 2

回答已采纳

点击加载更多