2回答
我是python和web scraping的新手。您的帮助我们将不胜感激。我在编程和练习方面是新手。我正在使用python和selenium进行web抓取。 我正在试着从事实上抓取数据。目标是找到过去24小时内发布的所有工作，并刮刮外部链接，这是在工作详细信息页面上与链接文本“申请公司网站”，标题，公司，名称，位置，工作描述。我写了以下代码，但是它正确地获取了页面上的</e
浏览 33提问于2020-07-15得票数 1
回答已采纳
Reddit对于顶级帖子有不同的桶。他们有“这个时刻”、“今天”、“这个星期”、“这个月”、“今年”、“永远”。我认为创建这些列表的最佳方法是使用时间戳保存每一张选票，这样您就可以计算每个桶的帖子得分。这将是一个昂贵的查询，但他们可以逃脱它，因为Top对所有用户来说都是一样的，并且不会发生太大的变化，因此他们可以缓存查询结果。这只是我对正在发生的事情最好的猜测，但我很好奇，这是Reddit真正在做<
浏览 5提问于2014-01-30得票数 5
回答已采纳
我是Apify的新手。我想要抓取sitemap.xml中的每个链接我在网站地图上的链接看起来像：https://www.mywebsite.com/product_
浏览 0提问于2020-03-05得票数 0
5回答
ajax在每一次或一次加载所有
、、、、
假设一个页面上有几个链接。单击时，div将通过AJAX更新。更新的div包括来自数据库的数据。你能不能..。支持此场景，或者.会在几个隐藏的div中加载每个链接的内容，并在每个链接单击时显示相关的div。这样，ajax调用只被调用一次..
浏览 7提问于2009-01-15得票数 0
回答已采纳
2回答
我需要开发一个抓取工具，从整个网络上抓取产品的数据(价格，标题等)。现在，我确实有抓取的经验，但这是一个单一的网站。我不知道如何抓取整个网络。一种可能的解决方案是查询google，然后从google中出现的链接中抓取每个网站。这是一种好的方法吗？我<
浏览 0提问于2012-04-14得票数 1
回答已采纳
1回答
我正在使用nutch 1.4来抓取网站。出于演示目的，我开始使用jabong.com爬行，但我观察到nutch无法获取站点中的所有链接。谁能告诉我有什
浏览 2提问于2012-03-26得票数 1
回答已采纳
是否可以跟踪是否有人链接到我的网站上的数据？具体地说，如果我的数据在由开发人员程序动态生成的站点中使用？我想知道是否有人明目张胆地将我网站的数据冒充自己的数据。显然，有一些方法可以直接链接到内容，比如内容操作，甚至是手动操作。但是，如果有人将我的内容链接(或直接逐字添加或操纵)到他们的网站上，
浏览 1提问于2013-03-20得票数 0
回答已采纳
我们希望在搜索引擎中索引我们的应用程序内容(动态)，并且没有web应用程序。我已经了解了分支特性，它似乎与我们非常匹配，但是，即使在阅读了文档之后，我仍然无法理解以下内容：
我们的内容(优惠券/优惠)每时每刻都在变化，因此我们的数据是高度动态的。整件事情是如何工作的，就像我们需要为db中的所有内容创建分支通用对象和分支链接一样&如果是的话，我
浏览 3提问于2018-08-07得票数 0
3回答
抓取反向抓取
、、
蜘蛛从一个页面抓取一些特定的链接。然后，它在每个页面中搜索一个youtube链接和一个名称，以将其标识为(页面标题)。它确实找到了我需要的所有链接，但是顺序很奇怪。起始页:它在爬行器中(我不能发布超过2个链接，因为我是新用户)
我希望输出的顺
浏览 1提问于2012-12-31得票数 0
1回答
我是r和Webscraping的新手。我目前正在抓取一个房地产网站(https://www.immobilienscout24.de/Suche/S-T/Wohnung-Miete/Rheinland-Pfalz/Koblenz?enteredFrom=one_step_search)，但我没有设法抓取具体报价的链接。 当使用下面的代码时，我得到了每个</e
浏览 24提问于2019-10-01得票数 0
回答已采纳
我想开发一个应用程序，我给它的特定网站的网址，它从该网页上提取所有链接。在这里，我想给我的应用程序提供Url的网页是由Asp.net开发的，它包含一个搜索按钮、一个用于显示结果的GridView和一个DataPager，而GridView包含用于绑定到搜索结果的HyperLinkField现在我想知道有没有可能用我的应用程序一次提取绑定到Grid
浏览 1提问于2012-02-29得票数 0
回答已采纳
我想使用PHP来抓取我们有大约6,7000个href链接的文档。我们需要的是链接另一侧的内容，这意味着PHP必须跟随每个链接并抓取链接的内容。这可以做到吗？
谢谢
浏览 0提问于2009-09-17得票数 0
我正在构建一个java web媒体抓取应用程序，用于从各种流行的网站提取内容: youtube、facebook、rapidshare等等。应用程序将包括查找内容url的搜索功能，但也应允许用户将url粘贴到应用程序中(如果它们已经在媒体所在的位置)。已经在各种视频网站上做到了这一点。当为程序提供URL时，它决定使用哪种抓取器来获取内容；例如，youtube watch链接返回YoutubeScra
浏览 1提问于2010-03-25得票数 0
回答已采纳
假设我提交了一个站点地图页面，其中包含了我希望Google爬行的所有链接，但我没有提交站点地图，而是获取页面和链接页面，并让Google对它们进行索引。这些机器人爬到多少个子页面？他们是爬行链式链接页面，还是只抓取父站点地图页面上的链接？
浏览 0提问于2018-12-13得票数 2
我是非常新的网页抓取和蟒蛇一般。我正在做一个项目，要求我从一个每10分钟刷新/更新数据的网站上刮取数据。我能够刮掉当前10分钟的数据，但是当数据刷新时，以前的数据就不再有效了。我需要帮助做三件事-
import reques
浏览 4提问于2022-08-25得票数 -1
回答已采纳
我们正在制作内容，并通过RSS源公开内容，供其他博客作者联合使用。其他人正在挑选我的内容，并在他们的网站上联合起来，这导致了欺骗。
我可以在RSS提要中添加一个规范标记吗？如果是，它会影响我们的网站吗？
浏览 0提问于2016-09-21得票数 3
云服务器
ICP备案
云直播
对象存储
实时音视频
腾讯云开发者
