2回答
看起来Apify将处理过的请求保存在“已处理”目录中。我想停止这个操作，因为apify不会抓取我之前抓取过的页面。有人知道如何阻止Apify保存已处理的请求吗？
浏览 25提问于2020-10-21得票数 0
回答已采纳
我正在学习如何在Apify Web-Scraper中使用request，我不明白它是如何工作的。 我首先用Postman做了这件事，我确实得到了我想要的结果，现在我想在Apify上做同样的事情。const request = new context.Apify.Request({ method: 'P
浏览 20提问于2019-09-02得票数 0
回答已采纳
3回答
目前，我有一个请求队列中的所有30个urls (通过Apify web-接口)，并且我试图查看它们何时全部完成。 let pendingRequestCount = await queue.getInfo();
我需要将最后一个时间循环中的handledRequestCount达到最大值2，从不4.而木匠只是正常地结束了。我已经将“返回”放在while循环中，因
浏览 2提问于2019-08-13得票数 2
回答已采纳
如何将此脚本的JSON输出保存到Apify中的key-store-value？当我运行脚本时，一切正常，数据集显示了每种类型的抓取数据，但是key-value-store/Keys仍然是空的。有什么简单的命令可以帮我做到这一点吗？下面是我的Actor代码： const Apify = require('apify');
Apify.main(asyn
浏览 6提问于2020-09-11得票数 0
1回答
如何抓取内容式保护网站？
、、、
在上面的网页上，如果我点击See all 33，我会看到下面的GET请求在Chrome DevTools中被发送。
我试过用木偶戏演员。我可以用puppeteer点击“查看所有33个”，但随后我需要解析生成的HTML文件。最好是直接从https://www.genecards.org/gene/api/data/Enhancers?我不确定如何获得它后，点击“查看所有33”与木偶。
我不确定apify是
浏览 15提问于2019-10-20得票数 1
1回答
完全相同的程序适用于不同的站点，但不适用于twitter。是否有一种方法可以使用cheerio或其他方法获取tweet的内容？我可以访问twitter，但是文档很难理解。编辑代码:这是我的木偶师代码，由于某种原因，它只在等待page.waitfornavigation()被挂断。对于任何其他网站，这是可行的。const Apify = require('apify');var OldAlphaAIData = {TICKER:"&qu
浏览 2提问于2020-07-02得票数 0
回答已采纳
我正在做一个评估Scrapy和Apify的项目。大多数代码都以node.js为中心，所以javascript解决方案会很好。同时，我也喜欢在Apify中使用木偶师这个事实。尽管如此，我的用例需要对许多网站进行相当浅的(例如深度约4)的爬行。这在Scrapy中很容易配置，但我不知道如何在Apify中实现。有办法在新的Apify API中指定最大深度吗？看起来这是他们遗留的爬虫中的一个
浏览 8提问于2019-10-16得票数 0
回答已采纳
我已经编写了代码，通过Web API保存sql中的简单数据后，单击保存错误显示
“CORS策略已阻止从源'‘访问'’处的XMLHttpRequest :对印前检查请求的响应未通过访问控制检查:请求的资源上不存在
浏览 1提问于2019-04-02得票数 0
我有一个angular2项目，例如:保护检查用户是否已登录，并仅阻止注册用户的组件。因此，如果用户使用保护刷新页面，则在请求完成之前，保护程序会阻塞页面。-更新user.service包括：
浏览 7提问于2017-03-26得票数 0
1回答
我尝试使用这个API获取我的linkedin提要：
但我得到了这样的答复："CSRF检查失败“。我明白林林丁为什么会回应这个问题，但如何避免呢？
浏览 0提问于2018-03-15得票数 3
我有一个安全问题，有人试图调用随机API，这些API在我们的服务器上不受支持，但通常用于administrators API。我将下面的代码设置为处理404以避免对此攻击作出响应。module.exports = function () { return ((req, res, next) => {};
客户机所发生的事情是等待服务器响应，但我想知道这是否会影响我的express.js服务器的性能，以及在没有re
浏览 0提问于2018-10-17得票数 4
1回答
我是否正确地减轻了DDOS？
、、、、
昨晚，我的论坛成了DDOS攻击的受害者。我已经确认这是HTTP洪水。我做的第一件事是启用CloudFlare检查您的浏览器。它阻止了大量请求，apache再次开始响应。接下来，我在MyBB上收到一条消息，说打开了太多的MySQL连接。所以我停止了apache和MySQL。我继续将连接限制提高到10,000，我的but服务器是否能够处理这些问题是另一个问题，但是限制不会再导致错误。
接下来，我启动了MySQL，然后是apache。
浏览 0提问于2016-09-06得票数 1
问题的背景是这样的:我们创建工作流，我们保存它，一段时间后，一个新的实现请求来了，我们改变了一个活动。在此之后，已保存的工作流实例将无法再运行。似乎添加的新参数阻止了序列化顺序？
浏览 0提问于2016-06-30得票数 0
我将我的应用程序连接到一个OData服务(V2)。连接参数已存储在manifest.json中。var oDataModel = this.getModel(); // sap.ui.model.odata.v2.ODataModel
oDataModel.setUseBatch我可以在manif
浏览 3提问于2017-02-02得票数 6
回答已采纳
1回答
如何在modsecurity中阻止这些请求：
已尝试
SecRule REQUEST_URI "12.54.87.55:443我想阻止主机报头是一个数字IP地址的所有请求
浏览 0提问于2018-05-30得票数 -1
在网站环境中，如何将ajax帖子发送到Handler.ashx安全，以及如何阻止人们直接调用handler.ashx并将垃圾放入服务器端并可能破坏服务器端？在处理程序中检查是否已登录。
站点创建负载上的列表项--一个唯一的ID被保存为cookie，当调用处理程序时，该ID必须存在于Ajax和处理程序中。
浏览 4提问于2012-06-27得票数 0
回答已采纳
好的，我的npm审计要求我手动检查这个文件，而它显然需要最新版本的axios(0.21.1)，那么我如何重新构建它？这是错误btw： 有关其他指导，请访问https://go.npm.me/audit-guide 高服务器端请求伪造 包axios 在>=0.21.1中打了补丁 apify的依赖关系 路径apify >apify-client > axios {
"_from
浏览 209提问于2021-01-09得票数 2
我正在尝试使用谷歌应用程序脚本更改Apify Google搜索刮板中的搜索查询，方法是将搜索词设置为变量。我拿到这个了
<!" content="Apify (formerly Apifier) is the world’s most advanced web scraping and automation platform2F%2Fapi.apify.com%22%2C%22cdnPrefix%22%3A%22https%3A%2F%
浏览 0提问于2020-04-02得票数 2
假设您有一个从用户收集数据作为输入的UINavigationController。在最后，用户可以点击“保存”，通过web API启动到后端的保存。如果不是，那么这里所需的流程是什么？只是在调用期间禁用“保存”UIBarButtonItem吗？什么是用户返回导航堆栈，再次前进，并尝试重新提交(假设由于有限的连接，用户的原始网络请求仍在发送)。
浏览 5提问于2015-08-28得票数 0
6回答
EDIT:为了回应关于在锚元素上执行点击事件的评论，或者使用window.open-我不能使用这些，因为弹出窗口阻止程序。我必须允许用户在锚点上的原始mouseclick事件完成它的过程-导致一个未被阻止的新窗口。考虑一下带有播放器页面链接的web编辑器的情况。
单击设置
浏览 0提问于2013-01-03得票数 0
云服务器
ICP备案
云直播
腾讯会议
对象存储
腾讯云开发者
