我刚开始使用Python，我有这种奇怪的行为，Python大多数时候会给我一个错误，有时它会正确地编译我的代码。import requests
def ge
浏览 28提问于2019-07-11得票数 1
回答已采纳
1回答
我想从IMDB用户页面抓取会员年数数据。
})
soup = BeautifulSoup可以看到奇怪的行为，有时这个函数工作得很好并给出输出，但是当我对所有数据(2136个用户链接)调用这个函数时，就会得到这个错
浏览 0提问于2021-06-13得票数 0
4回答
我试图刮一个网站，有链接到亚马逊与Python使用这些框架-硒，美丽的汤。我应该使用scrapy来完成这项任务，还是scrapy对于这个简单的刮刀来说太过压倒性？这是针对第一个产品的，稍后我将对此进行迭代 from bs4 import BeautifulSoupimport time
first_ar
浏览 50提问于2018-06-08得票数 0
回答已采纳
下面是我的python代码：from bs4 import BeautifulSoup
soup = BeautifulSoup(page)它适用于google.com和许多其他网站，但不适用于amazon.com。此外，我发现它也不能从appannie.com抓取。但是，代码返回的不是none，而是一
浏览 0提问于2014-05-09得票数 0
我正在使用urllib和BeautifulSoup来抓取twitter数据。但是，当我试图抓取其他人的数据时，例如，它需要登录。
如何用Python脚本实现自动登录？或者，如何使用Python模拟登录过程？
浏览 0提问于2013-06-25得票数 0
3回答
我希望从许多不同的地方政府网站上获取公共数据。此数据不是以任何标准格式(XML、RSS等)提供的并且必须从HTML中抓取。我需要抓取这些数据，并将其存储在数据库中以备将来参考。理想情况下，抓取例程将在循环的基础上运行，并且只将新记录存储在数据库中。对于我来说，应该有一种方法可以在这些网站上轻松地检测到旧记录中的新记录。
我最大的问题是:实现这一目标的最佳方法是什么？我还知道，一些编程语言也可以更容易地解析HTML数据。我是一个具有几种
浏览 0提问于2012-09-04得票数 0
2回答
我使用Python语言和BeautifulSoup来抓取存储。我想问的是，如果我需要清理一些其他的eCommerce商店(比如亚马逊、Flipkart)，我是否需要定制我的代码，因为它们具有不同的HTML ( 和 名字是不同的，另外还有其他东西)。我想知道比价网站是如何从所有在线商店中抓取数据的？他们对不同的在线商店有不同的代码，还是有通用的代码？他们会研究每个在线商店的HTML模式吗？
浏览 40提问于2014-12-28得票数 7
回答已采纳
如何使用openpyxl将数据附加到现有工作表？我用python创建了一个抓取器，它能够从网页上抓取标题和链接。我希望用openpyxl把它们写成excel文件。但是，我的刮刀既不将这些新填充的数据写入excel文件，也不抛出错误？我哪里错了？提前感谢大家来看一看。这是我的尝试：from bs4 import BeautifulSoup
from openpyxl import load_workbo
浏览 5提问于2018-01-11得票数 0
回答已采纳
我是Python的初学者，并且已经开始在Python中进行web抓取。目前，我正在尝试建立一个价格跟踪器的在线商店，如亚马逊。我能够用BeautifulSoup和requests从亚马逊抓取文本，如产品的价格和名称，收集这些数据后，我可以将价格与用户设置的门槛价格进行比较。我有一个我想使用我的价格跟踪器的其他在线商店/网站的列表，例如Footlocker。由于每个网站都有不同的html结构
浏览 16提问于2021-01-09得票数 1
我想做一个网站，显示亚马逊和易趣产品价格的比较。其中哪一个会工作得更好?为什么？我对BeautifulSoup比较熟悉，但对Scrapy crawler不太熟悉。
浏览 323提问于2013-10-30得票数 146
回答已采纳
我正试图为视频抓取编辑页面。我使用python和漂亮的汤来执行job.The代码，有时返回结果，有时在重新运行代码时不返回，我不知道哪里出错了。有人能帮忙吗？我是蟒蛇的新手，所以请容忍我。import requests
page = requests.get('https://www.reddit.com/r/FortNiteBR/comments
浏览 1提问于2019-01-14得票数 1
回答已采纳
我从python中的BeautifulSoup开始，我想从Android Play Store中抓取，包名称和页面中每个应用程序的价格。为了获得包名，我使用了以下代码： url = "https://play.google.com/store/apps/category/NEWS_AND_MAGAZINES/collection/topselling_paid"ht
浏览 11提问于2019-03-12得票数 0
回答已采纳
2回答
我在使用BeautifulSoup抓取电子商务网站时遇到了问题。我做了一些谷歌搜索，但我仍然无法解决问题。请参阅图片： Result：
这里是我试图刮的网站："“
当我试图打开Google (F12)上的检查元素时，我可以看到产品的名称、价格等。但是当我运行python程序时，我无法在python结果中得到相同的代码和标记。在googling之后，我发现这个网站使用AJAX
浏览 0提问于2019-01-28得票数 2
回答已采纳
4回答
我有问题从这个网站抓取数据：我对python相对陌生，对web抓取完全陌生。以下是我到目前为止所拥有的：from bs4 import BeautifulSoup
html = urlopen(url)
浏览 1提问于2020-06-22得票数 1
回答已采纳
我正在尝试做一些网络抓取(为了使用Python udemy自动化那些无聊的东西)，但是我一直收到HTTPError: 403 Client Error: HTTP Forbidden for url:错误下面是我一直在使用的代码：import requests F
浏览 0提问于2019-12-10得票数 0
我使用BeautifulSoup ('lxml'解析器)和urllib.request.urlopen()从一个网站获取文本信息。但是，当我在Acitivity中查看网络部分时，我看到python下载了很多数据。这意味着不仅文本被下载，而且图像也被下载。
在使用BeautifulSoup进行网络抓取时，有可能避免下载图片吗？
浏览 2提问于2016-04-03得票数 0
回答已采纳
我创建了以下方法：from bs4 import BeautifulSoup
soup = BeautifulSoup(response.text, "html.parser")
lyrics
浏览 5提问于2020-09-03得票数 0
1回答
我想得到亚马逊网站上的评论数量。但是，当我获取数据时，它与站点上的数据不同。(131是在抓取之后，655是从亚马逊)我附上截图的网页和刮后的一个。like Gecko) Version/13.0.5 Safari/605.1.15'}
soup = bs4.BeautifulSoup
浏览 2提问于2020-02-18得票数 3
云服务器
ICP备案
云直播
腾讯会议
实时音视频
腾讯云开发者
