我正在尝试自动化我在devtools中手动执行的过程。在dev控制台中，我将创建一个变量对象：然后调用api对象api.getData(arg)，然后返回一个对象{} var api = angu
浏览 9提问于2018-02-15得票数 0
1回答
考虑下面的NightmareJS脚本..。 .viewport(1000,1000) .goto('https://yandex.com/')
浏览 4提问于2017-04-06得票数 0
回答已采纳
如何在node.js和nightmare.js中使用超出其作用域的变量(web抓取) 当我试图在await作用域之外使用变量'downloadLink‘时，它返回未定义的变量。selector0') .click('#selector2')
.evaluateconsole.
浏览 21提问于2020-08-07得票数 0
回答已采纳
1回答
我正在使用nightmare.js进行web抓取，我试图通过获取输入接收到的值将id添加到按钮，如果按钮内的文本与输入匹配，则将id添加到按钮。 .type('#search', 'air jordan 1 shadow \u000d') .click('.result-thumbnail')
.evaluate有没有其他方法可以解决这个问题，还有为什么我们不能将innerTe
浏览 0提问于2018-06-26得票数 0
nightmare = Nightmare({ show: true });
.type("input", "nightmare.js").click("button[type=submit]").evaluate(function(){
var title = document.querySelector
浏览 4提问于2016-08-25得票数 1
1回答
我使用Nightmare.js运行以下代码： .viewport(1000, 1000) .inject('js', 'jquery.js') .screenshot('page.png')
浏览 0提问于2015-11-12得票数 5
回答已采纳
我想将我的应用程序部署到heroku，它包含使用nightmare.js的web抓取，但我的应用程序在部署时无法工作。有什么问题吗？这是基本的代码。wait(200)
.evaluate当我把它托管在heroku上时，它什么也不
浏览 5提问于2020-08-11得票数 0
1回答
我正在尝试建立一个使用Reactjs的网络抓取应用程序。我在普通的JS中使用了nightmare.js，我确实得到了想要的输出。但是，当我尝试添加一个按钮和创建函数时，它并不能很好地工作。我现在想直接使用ReactJS，因为这是我最终想要做的事情。
有没有人可以给出一个在ReactJS中以jsx格式使用nightmare.js或Casper.js的小示例代码，或者任何提示或指针。我基本上希望它在我运行node ser
浏览 0提问于2017-05-19得票数 2
回答已采纳
我正在使用Nightmare.js进行add抓取，并尝试将id添加到带有特定文本的按钮中，这样我就可以单击它，因为页面是用javascript动态生成的。下面的代码无法工作，因为出于某种原因，我无法在if语句中使用indexOf中的变量。 .wait(1000) .e
浏览 0提问于2018-06-26得票数 2
回答已采纳
1回答
我使用Watir和Nokogiri解析网页并与它们交互。我想确定一个DOM元素在单击脚本时是否触发它。从我的研究中，我知道这在JavaScript和chrome开发工具中是可能的，但是我想用Ruby来实现这一点。
例如，。当我检查所显示的图像时，我所看到的只是带有一些CSS样式的div，但是没有迹象表明它是一个链接，或者当我单击时它会做出反应。然而，当我单击某些元素时，会执行一个动画(或脚本)。Update:最初考虑的是抓取与
浏览 1提问于2013-05-14得票数 5
回答已采纳
1回答
我使用nightmare.js构建了一个简单的节点脚本来抓取网站。var nightmare = Nightmare(); .goto('http://google.com')我这样写的：
var night = new Nightm
浏览 4提问于2015-09-15得票数 7
回答已采纳
我使用nightmare.js来抓取网页内容。但是我试图多次运行评估函数(每页运行一次)。我尝试将内容推送到全局变量(在主范围内)，但无法从浏览器范围内访问它。
有人能建议如何在一个噩梦实例上运行多个评估方法并从每个实例中提取信息吗？var i = 0; i < 4; i
浏览 3提问于2016-02-03得票数 3
回答已采纳
我正在尝试使用python来抓取一个用无限滚动实现的网站。实际上，网络就是pinterest。我知道如何使用selenium来抓取具有无限滚动的web。但是，WebDriver基本上模仿了访问web的过程，而且速度慢得多，比使用BeautifulSoup和urllib进行抓取要慢很多。你知道有什么时间有效的方法来刮一个无限滚动的网页吗？谢谢。
浏览 0提问于2014-12-29得票数 0
回答已采纳
我有兴趣尝试一个网络抓取项目。目标站点使用Javascript动态加载和更新内容。大多数在线讨论都表明，在尝试这样一个项目时，node.js、casper.js、phantom.js和nightmare.js都是相当流行的工具。Node.js似乎是最常用的。如果我正在运行一个烧瓶服务器，并且希望显示一个node.js的结果，例如，在我的站点上以表格格式刮擦，这是可能的吗？我会遇到兼容性问题吗？或者，为了保持一致性，我应该尝试使用基于python的方法来进行BS4之类的<
浏览 6提问于2017-04-19得票数 0
回答已采纳
1回答
在我们的Electron应用程序中，我想使用dev工具来检查只有在父元素经历鼠标悬停操作时才存在的元素。
每当我去与开发工具交互时，我的鼠标必须移动，元素就消失了。我知道Chrome开发工具通常会暂停f8的脚本执行。这在Electron中似乎不起作用。我还尝试在dev工具中强制父元素使用:hover和:focus，但这没有任何作用。
浏览 5提问于2018-02-14得票数 1
在抓取站点时，我注意到datetime属性中的日期与节点内的文本不同。在Google的开发工具中，datetime属性与显示的文本相同。我的问题是，为什么scrapy会获得与开发工具不同的datetime属性？我能从datetime属性中得到正确的日期吗？getall()
['<time datetime="2021-11-15T08:17:20+01:00">Sonntag, 08.03.2020 /
浏览 1提问于2022-09-19得票数 1
回答已采纳
1回答
我试着用Ghost.py做一些网络抓取。我试图跟踪一个链接，但是Ghost似乎并没有对javascript和链接进行实际评估。我的问题是，我处于HTTPS会话中，不能使用重定向。我也有一些javascript的进一步评估，所以我不能使用机械化。当我查看ghost.content时，我仍然在同一个页面上，结果是空的。我注意到，当我在尝试计算单击时添加expect_loadin
浏览 1提问于2014-02-10得票数 0
回答已采纳
4回答
我有一个卷曲页面抓取与卷曲，并希望抓住所有的链接与一定的id。据我所知，最好的方法是使用dom和xpath。下面的代码抓取了大量的url，但删除了其中的许多，并抓取了不是url的文本。$curl_scraped_page是用卷曲抓取的页面。new DOMDocument();$xpath = new DOMXPath($dom);
$hrefs = $xpath->evalu
浏览 0提问于2011-03-25得票数 2
3回答
我正在使用一个Spring应用程序，它从不同的API下载数据。为此，我需要一个与API交互以获取所需数据的类获取器。这个类的一个要求是它必须有一个开始抓取的方法和一个停止抓取的方法。此外，它必须异步下载所有内容，因为用户必须能够在获取数据时与仪表板进行交互。
实现这一目标的最佳方法是什么？我一直在阅读有关任务执行器和Spring的不同注释来调度任务并异步执行它们的内容，但这些解决方案似乎并没有解决我的问题。
浏览 0提问于2013-05-30得票数 1
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
腾讯会议
云直播
对象存储活动推荐
腾讯云开发者
