想要获得所有类别的列表，产品，价格，描述只有一个特定的卖家从亚马逊。任何编码语言。提前谢谢。
浏览 22提问于2019-09-23得票数 0
5回答
我想用Greasemonkey抓取一个站点，想知道是否有比GM_setValue更好的临时存储值的方法。
我想做的是在社交网络中抓取我的联系人，并从他们的个人资料页面中提取Twitter URL。我目前的计划是在自己的标签页中打开每个配置文件，这样它看起来更像一个普通的浏览者(即css、scrits和图像将由浏览器加载)。然后用GM_setValue存储Twitter URL。抓取所有配置文件页面后，使用存储的值创建
浏览 0提问于2009-01-28得票数 8
回答已采纳
1回答
在我的爬虫中，我从一个excel文件中获得了startURL。
从这个页面上，我得到了每个变体与每个产品代码与变体相关联，但在这个网址我不能刮价格和图片，因为这些数据只出现在我选择一个特定的鞋码和颜色。在我尝试抓取价格时，我所做的是格式化一个亚马逊</
浏览 2提问于2019-01-29得票数 0
6回答
爬行和网络抓取有区别吗？
如果有不同之处，为了收集一些网络数据来提供一个数据库，以便在定制的搜索引擎中使用，最好的方法是什么？
浏览 2提问于2010-12-02得票数 96
回答已采纳
我想做一个网站，显示亚马逊和易趣产品价格的比较。其中哪一个会工作得更好?为什么？我对BeautifulSoup比较熟悉，但对Scrapy crawler不太熟悉。
浏览 323提问于2013-10-30得票数 146
回答已采纳
虽然我知道很多电子邮件客户端会预取或缓存图像。我不知道有任何像<a href="somelinkhere">some link</a>这样的预取常规链接
这是一些电子邮件做的一种做法吗？如果是，有没有一种可以添加到链接中的rel属性的无跟随类型来帮助防止这种情况？
浏览 2提问于2015-12-18得票数 11
3回答
刮擦-如何停止元刷新重定向？
、、、、
是我正在爬行的网站。一开始我没有问题，但后来我遇到了这个错误。httpReferrer=%2Fproperty-for-rent%2F1> from <GET https://www.propertyguru.com.my/property-for-rent/1>
网站知道我是一个机器人，并将我重定向到一个带有captcha代码的页面。我认为handle_httpstatus_list或dont_redirect不能工作，因为重定
浏览 0提问于2019-07-03得票数 3
我提出这个问题，就如何设计一个系统寻求实际的建议。忽略来自第三方卖家的数据和用户生成的内容，所有的“东西”必须来自某处，并由某人维护。它也是难以置信的详细和准确。多么?他们是怎么做到<e
浏览 2提问于2010-12-22得票数 8
回答已采纳
我最近注意到，我在谷歌上搜索的一些东西，在我的移动设备上开始作为广告出现在我的合作伙伴的Facebook上。我没有Facebook帐户，我使用禁用跟踪功能的火狐，我们总是使用不同的设备，但我们在同一个WiFi网络上。我假设类似的IP地址是问题所在，但这是我第一次注意到它发生在使用
浏览 0提问于2020-03-27得票数 1
回答已采纳
我怎样才能抵抗那些坏的不明机器人来爬行我的网站呢？一些不好的机器人，他们的名字没有出现在阿帕奇的cPanel中，正在严重访问我的网站带宽。我不知道这些机器人的IP地址，所以无法通过IP地址阻止它们。这些机器人消耗了太多的带宽的网站，因此，我需要增加它从服务器。
浏览 1提问于2012-03-30得票数 6
4回答
下面是我看到的一些示例:前几个示例中的某个地方包含了“User：”标记，并且我已经更改了它的字体，以便更容易地看到它。我理解“user：”标记通常是一个标头，下面是一个典型的“user：”字符串序列是发送到服务器等的实际用户代理，但通常“user：”字符串不应该是实际用户代理的一部分，这更像是预置或标记，表明接下来的是实际的用户代理因此，第一个用户代理关闭括号)“在第二个用户代理开始之前从未发生过，它总是在结束时出现，因此，第二个用户
浏览 0提问于2012-09-27得票数 5
14回答
我正在设置一个使用PHP和MySQL的网站，它本质上只是一个现有数据库的web前端。可以理解的是，我的客户非常希望阻止任何人复制数据库中的数据，但同时又希望所有内容都公开可用，甚至想要一个"view all“链接来显示数据库中的每条记录。即使我删除了"view all“链接，理论上，仍然有人可以使用自动化过程逐条查看每条记录，并将这些记录编译到一个新的数据库中，实质上是截取所有信息。有没有人有任何
浏览 2提问于2010-01-15得票数 25
回答已采纳
10回答
我想从网站上获取每天的日出/日落时间。有没有可能用Python抓取web内容？使用了哪些模块？有没有可用的教程？
浏览 2提问于2010-01-18得票数 186
回答已采纳
5回答
(机器人友好)
、、、、
我想知道是否可以更改url显示，并据此更改页面的内容，并使url和页面的内容变得友好(这意味着机器人实际上可以索引它们)。我已经尝试过使用AJAX动态加载数据，并使用angularjs路由，但是机器人无法对它们进行索引。另外，漂亮的urls和查询字符串不是我要找的，我正在寻找一种理论，可以在登陆时呈现数据，并在不刷新页面的情况下改变链接的路径和内容，而且我不想写两次代码(一次在服务器端，一次在前端)。这些都是我已经尝试过的事情，任何帮助或指导解决方案都
浏览 12提问于2016-05-29得票数 5
回答已采纳
3回答
我试图从获得所有的产品，但不知何故，我不认为我选择了最好的方法，因为其中一些是失踪的，我不知道为什么。这不是我第一次遇到这样的麻烦。我现在的做法是这样的：
浏览 4提问于2017-12-28得票数 12
回答已采纳
7回答
随着移动应用程序的货币化变得如此流行，我感到惊讶的是，扩展开发人员仍然主要依靠捐赠作为他们软件的主要补偿形式。当然，这不是一个问题，但我想知道为什么浏览器扩展和插件通常不受货币化的限制，而为Visual和Photoshop等软件设计的插件通常只能通过购买才能获得。
浏览 0提问于2011-05-26得票数 14
回答已采纳
我的网站将基本上是销售服务；我的搜索引擎优化排名仍然会受到影响，如果我在一个空白的html页面嵌入Flash网站？我在那个关键点，在那里我准备上传网站，但我只是重新考虑与Flash做生意的便利性。
浏览 0提问于2009-11-02得票数 1
回答已采纳
10回答
阻止机器人表单提交
、、、、
我正在尝试找出一种好方法来防止机器人提交我的表单，同时保持过程简单。我读过一些很棒的想法，但我考虑过在提交表单时添加一个确认选项。这会阻止机器人吗?或者机器人会不会太容易弄明白这一点？下面是演示我的想法的代码和JSFIddle：
if(Confirm()) {
alert('Form submitted')
浏览 7提问于2013-03-10得票数 31
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
