无法使用Requests和BeautifulSoup获取正确的值

文章/答案/技术大牛

发布

1回答

python、web-scraping、beautifulsoup、python-requests

q=%3Anovelty&page=0，但无法获得折扣价格。示例产品： ? HTML在<span class="now">下显示了R17.59的价格，但requests显示了<span class="now">\n

浏览 21提问于2020-03-19得票数 1

回答已采纳

2回答

Python bs4如何从find_all()中找到内联样式

python、web、beautifulsoup

我正在尝试使用python和BeautifulSoup获取内联样式元素的高度值，我设法获得了带有特定类的所有div，但无法知道如何获得下面输出的内联style=height值，这是我的代码。import requests URL = "https://exampleonly

浏览 3提问于2022-05-28得票数 0

回答已采纳

3回答

无法按适当顺序排列web解析结果

python、beautifulsoup

我试图使用BeautifulSoup和d requests库从维基百科获取颜色列表。我得到了结果，但无论我多么努力，都无法按正确的顺序得到结果，这样我就可以将其写入一个文件中，而该文件又将用于另一个程序。所以请帮帮忙。下面是密码。# coding: utf-8import requests r = requests.get('h

浏览 1提问于2019-07-19得票数 4

回答已采纳

2回答

无法使用BeautifulSoup提取span元素

python、html、beautifulsoup

我正在使用BeautifulSoup来尝试提取这个值。我尝试过的： pg = requests.get(websitelink)value = soup.find('span',{'class':'wall-header__item_count'}).text 我尝试过find和find all，

浏览 40提问于2021-09-13得票数 1

回答已采纳

1回答

如何用python3.6抓取jquery代码？

python、python-3.x、web-scraping、beautifulsoup、python-requests

我使用了BeautifulSoup和requests，但我无法从图片中获取值。from bs4 import BeautifulSoup page = requests</e

浏览 0提问于2018-05-18得票数 0

1回答

使用BeautifulSoup抓取信息

python、web-scraping、beautifulsoup

我需要获取以下字段的一些信息： Website Address Blacklist StatusServer Location来自本网站： https://www.urlvoid.com/scan/gordonramsay.com/ 我使用了requests和BeautifulSoup来访问网站并抓取信息： import requestsfrom b

浏览 20提问于2020-04-03得票数 1

回答已采纳

1回答

Urllib2被混淆字符串而不是页面源

python、urllib2

当我使用爬行urllib2时，我无法获得页面源代码，而是一个混淆的字符串，我无法理解它是什么。更新：我认为您可以运行上面的代码来获得我得到的东西。下面是我在python中得到的信息：这正是我所期望的(使用curl)：<head> <link rel="mask-icon" s

浏览 0提问于2015-09-05得票数 1

回答已采纳

1回答

如何获取pypi中的软件包总数？

python-3.x、pip

pip list --format=columns |wc -l它显示我的本地pc上安装了73个软件包。如何获取pypi远程官方服务器的套餐总数？

浏览 1提问于2017-11-25得票数 1

3回答

Web抓取-我得到的是标签，而不是值

python、web-scraping、beautifulsoup

我试图从一个网站上获取一些价值，但我得到的唯一的东西就是标签。我试图获取的变量的实际值是空的。我使用了requests和BeautifulSoup。import requests request = requests.get("https:/&#

浏览 17提问于2019-05-23得票数 0

回答已采纳

1回答

为什么这个列表返回相同的值？

python、web-scraping、beautifulsoup

我正在尝试抓取中的所有表值，并将这些值放入列表中。因为某种原因，我似乎无法理解。将信息裁断附加到数据列表后，只会输入一个值364次(表的长度)。我在循环中分别打印了每一行和每一个值，我知道我正在获取正确的元素/值，但是当我试图将值放到数据列表中时，一切似乎都出现了故障。有人能告诉我我做错了什么吗？from bs4 import Beautifu

浏览 2提问于2015-07-19得票数 0

回答已采纳

3回答

使用提取html页面时出现的“‘charmap”编解码错误

python、beautifulsoup

当我试图使用下面的代码加载任何页面时，它只是抓取标记<"head">而不是整个html等等。import requestssoup= BeautifulSoup(page.content, 'lxml-xml') print(soup.prett

浏览 1提问于2017-05-15得票数 1

回答已采纳

1回答

用python lxml抓取airbnb

python、beautifulsoup、lxml

="col-md-3 text-muted"]') if element.text.find('The Space') >= 0: 不知何故，“太空”是无法挽回的

浏览 1提问于2016-01-14得票数 1

回答已采纳

1回答

有没有办法从requests.get()的响应中解析出超文本标记语言？

python、python-requests

我正在使用HTML包从一个requests获取数据，并在响应数据中看到一些HTML元素，比如<p>、</p>和\'，以及其他一些元素。如果有帮助的话，response.encoding的返回值是utf-8。我想解析出所有的HTML值，并且在字段中只有一个简单的文本值。有没有一种方法可以轻松地删除或解析响应中的所有HTML元素？

浏览 0提问于2020-08-18得票数 0

9回答

"TypeError:类型为‘响应’的对象没有len()“

python、web-scraping、beautifulsoup

当我试图执行代码时它给出了错误消息。TypeError:类型为“Response”的对象没有len() response = requests.get(url) so

浏览 11提问于2016-04-19得票数 40

回答已采纳

1回答

无法获得正确的div从表中获取数据

python、web-scraping、beautifulsoup

我正在尝试从上抓取数据，在经历了大量的攻击和试验之后，我仍然无法识别如何从表中获取数据？import requestsurl = "https://gmatclub.com/forum/decision-tracker.html"soup = BeautifulSoup(page.

浏览 2提问于2021-05-25得票数 1

回答已采纳

1回答

用Python抓取javascript呈现网站的“脚本部分”

python、selenium

我正在做一个项目，我想看到用户在Reddit上的平均业力。因此，我正在清理用户业力，这在新的编辑结构中被证明是有点困难。我已经为这个问题做了几个小时了，但我离这个

浏览 0提问于2018-07-01得票数 2

回答已采纳

1回答

使用网页的Python解析的HTML与实际页面不同

python-3.x、web-scraping、beautifulsoup、html-parsing

我需要从表中获取和存储PM2.5和值。我使用BeautifulSoup4来抓取网页，但是我得到的解析HTML与实际页面不同。例如，我得到了这个而不是这个。from bs4 import Beautif

浏览 1提问于2020-07-23得票数 0

回答已采纳

1回答

如何用Python编程登录网站

python、login、web、urllib

我已经在互联网上到处搜索，看了很多例子，也尝试了我找到的每一个例子，但没有一个对我有效，所以请不要认为这是重复的-我需要在我的具体案例中得到帮助。我正在尝试使用Python登录一个网站(在这种情况下，我正在尝试使用v2.7，但我并不反对使用更新的版本，只是我已经能够找到关于2.7的最多信息)。我需要填写一个简短的表单，由用户名和密码组成。我需要填写和登录的网页表单如下(我知道它很

浏览 1提问于2014-05-07得票数 1

1回答

从python中的表中抓取数据

python、html、web-scraping

使用BeautifulSoup，我设法从所有东西都有标签的网页中获取数据，但没有它们，我的工作就很糟糕。📷经过多次尝试和错误，我设法获得美元汇率，但我认为必须有一个更好的方法。impor

浏览 0提问于2017-03-30得票数 3

回答已采纳

3回答

BeautifulSoup如何从<a>标签中获取文本

python、web-scraping、beautifulsoup

<a href="/all/views/all/" class="cmc-link">7,457</a>from bs4 import BeautifulSoupurl = 'https://coinmarketcap.com/'soup = BeautifulSou

浏览 1提问于2020-10-20得票数 0

回答已采纳

点击加载更多