1回答
使用以下url：
我已尝试更改开始日期和结束日期，但无济于事。当我用漂亮的汤刮的时候，我只能刮掉第一页的结果，然后刮就停止了。我在抓取(在本例中)全部85页的结果时遗漏了什么？(并且-我的代码是成功的，但只返回结果的第1页的
浏览 8提问于2020-02-26得票数 0
回答已采纳
1回答
关于美汤多页抓取的查询
、、、
我正试着从网站link - https://concreteplayground.com/auckland/events上抓取一个页面。我能够从第1页中提取所有内容。当我想转到下一页时，我找不到任何链接/解析下一页的引用。我尝试检查该页，当我检查是否转到第2页时，我发现内容如下-
<a rel="nofollow" class="page-numbers" href="">2<&
浏览 0提问于2018-05-24得票数 0
我试图从一个网站上抓取数据，这个网站返回了跨越多个页面的搜索条件的结果……使用硒，Python上的精美汤。第一页很容易阅读。移动到下一页需要点击'>‘按钮。scraping the first page
#now need to click on the ">" , so that it can take me to the next page 控件应转到下一页，以便我可以抓取。这些结果大约有
浏览 24提问于2019-05-25得票数 1
回答已采纳
嗨，我正在制作一个程序，它在堆栈溢出中为搜索词抓取结果。我需要知道抓取的最大页面，但是通过开发工具查看的html结构和通过漂亮汤获得的html信息是不同的。vue"soup = BeautifulSoup(result.text,"html.parser")
要获得这个结果，请编写代码并输出汤的<
浏览 1提问于2020-08-30得票数 1
我想要使用Python进行web抓取，我需要它，因为我想导入一些数据库，我们如何在Python中做到这一点。我们需要什么样的库？
浏览 2提问于2016-02-11得票数 0
5回答
LinkedIn网络抓取
、、、
是否有人知道适用于LinkedIn站点当前格式的任何web抓取工具或技术，或者如何弯曲API以进行更灵活的分析？最好是基于R或网络，但肯定对其他方法开放。
浏览 0提问于2015-05-13得票数 11
回答已采纳
我正在寻找一个库，它的API和用法类似于jQuery或Cheerio。
浏览 8提问于2013-03-21得票数 6
回答已采纳
为了进行一次调查，我试图从我的php页面上抓取谷歌搜索结果。我抓取6个结果，然后单击下一步按钮，在9页后获得下一页records.but，例如64个结果，它给出以下错误：([responseDetails] => out of range start)
我只想要尽可能多的数据。我不介意它是谷歌<
浏览 0提问于2013-05-27得票数 1
回答已采纳
我正在尝试从以下网站上收集秘鲁国会提出的几项法案的数据：
基本上，我想单击搜索结果中的每个链接，抓取账单的相关信息，返回搜索结果，然后单击下一个账单的下一个链接，重复此过程。我已经能够使用Selenium启动一个显示搜索结果的web浏览器，使用嵌入在iframe中的xpath点击第一个链接，然后用漂亮的汤抓取内容，然后导航回搜索结果。我遇到的问题是无法单击搜索结果
浏览 9提问于2019-08-06得票数 0
1回答
我想刮一个网站，列出了在南非的所有资格()
当你第一次转到这个链接时，你会注意到这是一个带有搜索条件的页面。我想要抓取所有的结果，这样我就不需要在搜索条件中输入任何东西-只需单击"GO“，然后返回我想要抓取的搜索结果。显示了20条记录的结果，共有16521页结果。在这个阶段，URL仍然是如上所述。有没有可能刮掉这些结果？从我所做的在线搜索中，我已经找到了在URL中定义页面
浏览 0提问于2016-07-05得票数 0
3回答
用python刮网站
、、、、
如果有一种方法可以在不使用任何第三方库(如beautifulsoup和scrapy )的情况下抓取一个网站，那么就可以使用beautifulsoup。
浏览 1提问于2020-06-09得票数 1
回答已采纳
1回答
我正在尝试使用和服刮亚马逊的结果页。例如，我在Amazon.co.uk搜索引擎上输入"Sony“，想要抓取结果以获得产品名称。我能够做到这一点为一个页面，但我想刮多页使用分页功能。我选择“下一页”作为分页的链接，但是我得到了一个E20错误。谢谢!浮点
浏览 1提问于2015-11-30得票数 0
以字体大小或字体颜色等属性来计算microsoft文档中的单词数的最佳方法是什么。返回红色字体的字数。我可以对它进行编码，但基本上我需要向正确的方向推进。我一整天都在使用ElementTree包、python，并意识到这不是最好的方法。非pythonic方法也是受欢迎的。
浏览 0提问于2014-09-13得票数 0
回答已采纳
2回答
我正在开发一个web抓取应用程序，并在ebay上对其进行测试。问题是应用程序应该跟随链接“下一步”(页面底部的链接应该转到下一页的结果)，但它有点停留在同一个页面(是的，我实际上不确定)。如果您尝试打开易趣并搜索任何会给出多页结果的词条，然后复制“下一步”链接并将其粘贴到新窗口中，或者右键单击该链接并选择在新选项卡/窗口中打开，该链接将停留在同一页上。所以我的问题是，当这些浏览器实际跟踪链接时(当我单击它时)，为了让我的抓取
浏览 3提问于2010-08-05得票数 0
回答已采纳
我正在用美汤在YouTube上做网页抓取。我的目标是从一个YouTube搜索页面找到所有的视频链接： response = urllib.request.urlopen("https://www.youtube.com/results?search_query=stfu")
soup = BeautifulSoup(response, "html.parser") 我正在搜索这个元素： <a id="video-titl
浏览 16提问于2020-07-16得票数 0
回答已采纳
1回答
record = extract_record(item) records.append(record) 它从搜索结果的第1页到第21页抓取数据，给出search_term，如"electronics“或"cosmetics”或"airpod pro case“ 然而，我意识到一些搜索结果会给我提供从第1页到第3页</e
浏览 74提问于2021-07-02得票数 0
回答已采纳
2回答
我正在试图找出一种方法，以某种方式从给定的类别中获取所有项目。我甚至不知道这样做是否合法。但我很好奇:)我需要收集这些项目，然后我会使用C#.net或java将它们放入我自己的数据库中，这并不重要。任何帮助都会得到重视。
浏览 0提问于2012-06-27得票数 0
回答已采纳
我只是进入到网络抓取和想要确保我没有伤害到网站。我计划使用漂亮的汤浏览数百页，在每个搜索结果页面上遵循大约100个链接，并下载超过75000个产品的描述(仅文本)。
浏览 3提问于2016-02-17得票数 0
回答已采纳
2回答
我正在用漂亮的汤抓取数据，页面有一个结构化的格式，如链接是https://www.brightscope.com/ratings/a的，评级通过other。评分后的每个字母，如a，b，c，...我尝试创建一个while循环来转到每个页面，当某个条件存在时，抓取所有的hrefs (我还没有读到那个代码)。但是，当我运行代码时，while循环继续不间断地运行。我如何修复它，使其转到每一页并搜索要运行的条件，如果没有找到，则转到下一个字
浏览 2提问于2018-08-26得票数 0
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM
腾讯云开发者
