我正在尝试使用BeautifulSoup在Python中抓取许多页面,但没有得到积极的结果。 我尝试使用request.get()和session.get()。我应该抓取的页数是92。import requestsimport urllib.request
with requests.Session as session:www.paginegialle.it/l
我试图刮一个网站,有链接到亚马逊与Python使用这些框架-硒,美丽的汤。我应该使用scrapy来完成这项任务,还是scrapy对于这个简单的刮刀来说太过压倒性?这是针对第一个产品的,稍后我将对此进行迭代 from bs4 import BeautifulSoupimport time
first_article.cli
我正在尝试找到一种在BS4中抓取多个页面的有效方法。我能够轻松地抓取第一页,并获得我需要的所有数据,但不幸的是,并不是所有的数据都在上面。还有另外两个页面需要抓取,而不是硬编码并更改第二个和第三个页面的URL,我想知道是否有更好的方法使用BS4在Python中实现这一点。唯一需要更改的部分是page=1到相应的页码(1、2、3)。import csv from bs4 import