腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
从reddit URL获取原始URL
、
、
考虑这个链接:https://www.reddit.com/r/todayilearned/comments/6x6iz8/til_princess_diana_on_live_tv_shook_the_hand_of/?ref=share&ref_source=linkhttp://www.bbc.com/news/av/magazine-39490507/how-princess-diana-changed-attitudes-to-aids
浏览 0
提问于2017-09-01
得票数 1
1
回答
检测用户是否正在使用NodeJS访问我的网络(WIFI)
、
、
、
我的问题是NodeJS的新手问题。我想以某种方式检测用户是否正在访问我的网络(Wifi),并且我想指出用户是否在我的网络中。
浏览 2
提问于2012-03-28
得票数 0
回答已采纳
1
回答
如何操作
node.js
网页
上的
数据
、
、
我对
node.js
和Javascript有点陌生,所以如果这个问题措辞不当,请原谅我。谢谢
浏览 1
提问于2016-07-29
得票数 1
回答已采纳
2
回答
构建一个使用
Node.js
在浏览器中刮RSS的
网页
、
、
、
我试图构建一个
网页
,其主要功能包括从国家气象局(如)
抓取
RSS提要,然后解析输出以显示各种参数(温度、湿度等)。作为文本。我已经研究过了,似乎
Node.js
有几种不同的方法来
抓取
外部
网页
,并将源代码作为一个对象返回。然而,据我所知,
Node.js
是为服务器端应用程序设计的,而我想在人们可以访问的实际网站上使用它。我被困在以下几个方面: 如何将
Node.js
功能集成到
网页
的代码中?
Node.js
脚本和其他依赖项是通过浏览器中的浏览器自动
浏览 3
提问于2020-07-26
得票数 1
回答已采纳
2
回答
是否可以使用
node.js
作为更快、更优雅、启用
数据
库的替代方案来替代greasemonkey?
、
、
、
我使用自动调用一个页面,从一个网站中
抓取
一些
数据
,这是很尴尬的,原因有两个: 我必须将所有持久化信息存储在JSON中,而不是直接存储在
数据
库中。是否可以使用
node.js
作为Greasemonkey的替代方案,因为
node.js
可以直接将记录存储在
数据
库中,并且不需要像Greasemonkey那样直观地加载页面?此外,我认为
node.js
将更容易使用,因为您不必像使用GreaseMonkey那样将它的脚本重新部署到火狐,这样就
浏览 18
提问于2012-06-22
得票数 1
回答已采纳
1
回答
使用AJAX请求
抓取
页面
、
、
、
我正在使用带有jsDOM的
Node.js
来
抓取
网页
并在其中执行JavaScript。但是,如果页面包含AJAX请求,则不会执行这些请求。 是否有在
抓取
的页面中执行AJAX调用的选项?
浏览 1
提问于2011-05-27
得票数 4
回答已采纳
2
回答
有没有可能通过网络进行自动搜索来检索链接?
重点是,我甚至不知道最好的解决方案是什么,比如使用脚本的
网页
还是使用小程序的
网页
……我刚开始接触终端和其他东西,刚刚安装了xubuntu,所以请……耐心点:D 感谢所有人!
浏览 3
提问于2016-01-25
得票数 3
1
回答
带有刮刀的Web爬行器,使用木偶和刮除器
、
、
、
、
我必须
抓取
和刮相当多的网站,这些网站是由React / javascript / html技术组合而成的。这些网站在所有地方都有大约。10万至50万页。我计划使用Selenium和Scrapy来完成爬行和
抓取
。单是Scrapy就不能对页面进行
抓取
,使用Selenium来
抓取
常规的javascript/html是非常耗时的。
浏览 3
提问于2019-12-04
得票数 0
回答已采纳
1
回答
在
node.js
中进行
网页
抓取
,以获取应用于
网页
每个元素的所有CSS属性。
、
、
我想找到一种基于
node.js
的
网页
抓取
技术,以便获得所有CSS属性,这些属性应用于
网页
的每个元素,就像firebug一样。有人知道如何在应用程序的
node.js
后端部分这样做吗?
浏览 1
提问于2017-06-20
得票数 1
回答已采纳
0
回答
如何让javascript函数运行在页面上下文中调用puppeteer函数?
、
、
、
我正在尝试制作一个自动在
网页
上玩游戏的机器人。到目前为止,我可以导航到网站,登录,并加载游戏页面,但我被困在这里。 我想在
网页
级别注入一个脚本,它使用jQuery不断地
抓取
网页
并确定游戏所处的状态。例如,假设我们有一个
网页
级别的函数,它在1秒的超时时间内
抓取
X的
网页
。当找到X时,我想从
网页
上
抓取
Y
数据
并将其发送到节点级别。我不确定这是否是处理这类任务的最合适的方法,但试图理解异步和promises是如何在
No
浏览 14
提问于2017-12-03
得票数 0
1
回答
在ldJSON项目中刮取
node.js
、
、
、
我正在做一个
node.js
项目,需要从页面中
抓取
schema.org内容。这些页面将schema.org信息作为ldJSON
数据
包含在脚本标记中:我试着在网上搜索,但只找到了使用python解决方案的页面。我发现了一些
网页
,它们建议简单地使用JSON.parse()来解析它。但是,在这样做之前,我需要得到脚本标记的内容。如何使用
node.js
获取此脚本标记的内容?
浏览 5
提问于2020-12-23
得票数 0
回答已采纳
1
回答
收集在线
数据
/信息并向程序报告的方法?
、
我问过关于元的Q格式,他们说正确的措辞,这应该是适当的。话虽如此,但如果我还在扼杀措辞,以防万一我想让大家明白(这是建议的),我很抱歉:我并不是在就某些事情或它们的工作方式征求意见,而只是寻求可能的方式。我不是有意无知,我真的很抱歉,如果我这样做,它只是建议我说梅塔。 现在对于Q;什么普通语言能够从公共在线网站收集信息,然后把它放在程序中,它可以作为任何旧变量被进一步处理?我对编码很陌生,我想把它作为一个小的“入门”程序来教我自己一些新的东西。问题是,我的想法,我甚至不知道从哪里开始。再说一遍,我没有要求具体的方法来做这件事,我只是好奇什么语言能够做到这一点?如果可能的话,我更喜欢用Visua
浏览 5
提问于2013-10-08
得票数 0
回答已采纳
2
回答
在C#中使用超文本标记语言敏捷包获取
数据
时,应用程序有时会获取
数据
?
、
我一直在使用HTML AGILITY PACK获取一些
数据
,通过选择一些标签从
网页
中获取
数据
,但我有一个bug之类的问题。SpanNodes = doc.DocumentNode.SelectNodes("//div[@class='form-field wide-80 如何使用C#在浏览器中刷新
网页
,或者如何使用超文本标记语言敏捷包通过在web浏览器中打开
网页
来获取
数据
?....
浏览 0
提问于2013-04-19
得票数 0
2
回答
从android应用程序的
网页
中查找json或xml
数据
、
、
我能找到座位空位的json或xml
数据
或其他信息吗?另外,如果它使用其他协议,你能告诉我是哪一个吗? 提前谢谢。
浏览 23
提问于2014-07-01
得票数 0
1
回答
在python gae上运行selenium?
、
、
我使用此代码来
抓取
angular网站的
网页
,创建一个json并将其提供给客户端。早些时候,这个站点很容易被BeautifulSoup
抓取
,我用来将json和put operation.This的当前时间一起存储在
数据
存储中,这样我就不会在每次客户端请求时都
抓取
网站,并且有一个函数可以确保在再次
抓取
网站之前但现在我不得不使用selenium,我无法想象selenium如何在服务器上打开浏览器(因为它需要在我的本地机器上做任何事情).I也研究了chrome的无头状态,但目前它只适用于
浏览 0
提问于2018-12-26
得票数 0
1
回答
Node.js
中的代码排序与分离
如何在
node.js
中排序文本。我
抓取
网页
并获得控制台日志,如下所示: 我不能刮任何具体的部分,这一切都是在一个和平。
浏览 2
提问于2016-01-16
得票数 1
7
回答
可以在服务器端运行jQuery吗?
、
、
、
、
我在
网页
抓取
工作中实现了AJAX分页,因为网站是在asp即扩展.aspx页面中开发的,我曾尝试提交分页表单以从其他页面获取
数据
,但没有任何成功,看看这里的代码我使用了,所以我的问题是如何从php点击分页链接我知道
Node.js
可以在服务器端运行javascript,但不知道如何在Apache和PHP上使用它。
浏览 3
提问于2013-02-27
得票数 7
回答已采纳
8
回答
使用
Node.js
实时
抓取
网页
、
、
、
、
最好的办法是使用
Node.js
抓取
网站内容。我想构建一些非常非常快的东西,可以以的方式执行搜索,在这种情况下,一个查询被分派到几个不同的站点,结果被
抓取
,并在可用时返回给客户端。
浏览 0
提问于2011-03-06
得票数 66
2
回答
NUTCH可以用来从电子商务网站获取
数据
吗?
、
、
、
我想从网站上获取
数据
。我想要易趣上不同商品的价格。我想把这些产品和它们的价格放在我的
数据
库里。纳奇在这里会有帮助吗?如果不是的话,我更喜欢哪种刮刀/爬行?
浏览 5
提问于2014-06-17
得票数 0
回答已采纳
1
回答
使用
Node.js
进行
网页
抓取
、
、
、
我观看并测试了一些教程和示例,以帮助我理解
抓取
代码是如何工作的,我看过
Node.js
和PHP教程,但遗憾的是,这些教程都没有解释如何将这些代码实际连接到html中的<input>标签,所以当用户粘贴链接时,它会
抓取
并显示
数据
。
浏览 3
提问于2017-02-06
得票数 1
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
Excel自动抓取网页数据,数据抓取一键搞定
理解网页数据抓取的原理
网页视频抓取插件-免费网页视频抓取插件
Python抓取网页数据的终极办法
如何为你的机器学习项目抓取网页数据?
热门
标签
更多标签
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
活动推荐
运营活动
广告
关闭
领券