腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
2
回答
使用
axios
/
cheerio
创建
网页
抓取
器
;
不能
理解
函数
的
其余部分
javascript
、
node.js
、
web-scraping
、
axios
、
cheerio
有
axios
/
cheerio
经验的人能回答这个问题吗?我正在尝试制作一个刮板,但很难让它获得一个选定
的
div html部分如下所示: <div class="_702d723c dib w-50 bb b--black-10 pr2"><p class="f2874b88 fw6 mb3 mt2 truncate black-80 f4">7.3.2</
浏览 16
提问于2020-10-15
得票数 0
回答已采纳
1
回答
努力
抓取
多个页面-
Cheerio
.js
javascript
、
node.js
、
asynchronous
、
web-scraping
、
cheerio
我正在尝试
使用
Javascript和
Cheerio
创建
一个网络爬行
器
,当我试图从
抓取
的
页面中
的
url中
抓取
数据时,我遇到了一些困难。例如,我
抓取
第一个页面的一些细节(包括链接页面的URL ),然后当我尝试
使用
回调
函数
抓取
链接页面时,我无法将返回值赋给对象。这两个
抓取
器
单独工作,但是我在让它们异步运行时遇到了问题,并且变量detailsPage总是
浏览 0
提问于2020-02-19
得票数 0
1
回答
从Twitch中
抓取
数据
javascript
、
html
、
r
、
phantomjs
、
twitch
不幸
的
是,此信息
不能
从Twitch API获得。当我去任何游戏(如)时,我可以看到"115,175名追随者·199,041名观众“。然而,当我转到“查看源代码”时,这些信息就不在那里了。我已经尝试
使用
phantomjs打开站点,但到目前为止我还
不能
想出如何让该部分渲染。(首选R中
的
解决方案,但不是强制性
的
)
浏览 90
提问于2019-04-24
得票数 0
1
回答
当我
使用
cheerio
时,这个选择
器
出错。
javascript
、
node.js
、
web-scraping
、
cheerio
我
使用
node、express、
cheerio
和
axios
来
创建
一个简单
的
网络爬行
器
。在这个例子中,
axios
有数据,但是在
使用
cheerio
加载数据后,我得到了这个错误:
抓取
器
代码:app.get('
浏览 27
提问于2021-02-16
得票数 2
回答已采纳
1
回答
无法在
函数
中应用
抓取
下一页
的
逻辑
javascript
、
node.js
、
web-scraping
、
axios
、
cheerio
我已经
创建
了一个脚本,
使用
axios
和
cheerio
从yellowpages获取不同
的
商店名称及其相关链接,然后
使用
这些链接从其内部页面
抓取
电话和电子邮件。脚本运行得很好。我现在想做
的
就是
使用
next page link从下一页
抓取
内容。我只是不明白如何在getLinks()
函数
中应用解析和
使用
下一页
的
逻辑。目前,这是我正在尝试
的
: const
浏览 13
提问于2021-09-14
得票数 3
2
回答
如何刮取页面node.js
的
一部分
javascript
、
node.js
我对编码相当陌生,我不明白为什么我
的
代码不起作用。它应该输出"Dominus Empyreus",尽管它只输出[]。以下是我的当前代码:const
cheerio
= require('
cheerio
'); const extractLinksobject to array ];
axios
.get('https:
浏览 0
提问于2022-07-17
得票数 -3
回答已采纳
1
回答
从reddit URL获取原始URL
javascript
、
node.js
、
reddit
ref=share&ref_source=linkhttp://www.bbc.com/news/av/magazine-39490507/how-princess-diana-changed-attitudes-to-aids
使用
Javascript,我如何从第一个链接转到原始链接,而不
使用
Reddit API?
浏览 0
提问于2017-09-01
得票数 1
2
回答
从维基百科中
抓取
表列
的
NodeJS程序
node.js
、
cheerio
我认为从维基百科页面中提取列是一个很好
的
方法。下面是我编译
的
代码和我正在得到
的
结果。我在
网页
上
创建
了一个基于选择
器
的
浏览 4
提问于2021-11-08
得票数 1
回答已采纳
2
回答
用vue js进行Web
抓取
javascript
、
vue.js
、
vuejs2
我期待着用Vue js制作一个网络
抓取
应用程序。 对于上面提到
的
套餐,我还需要做些什么或更好
的
选择吗?
浏览 2
提问于2020-07-06
得票数 1
1
回答
如何
使用
axios
和
cheerio
实现多页
抓取
?
node.js
、
axios
、
cheerio
、
scrape
你好,我正在
使用
axios
和
cheerio
来
抓取
一些数据。我想
抓取
多个页面,url结构类似example.com/? page =1。我如何用计数
器
抓取
每一个页面?
axios
({ url: "https://example.com/?
浏览 26
提问于2020-01-31
得票数 1
回答已采纳
1
回答
XMLHttpRequest被CORS策略阻塞,如何在没有访问更改标头
的
情况下修复
javascript
、
http
、
server
、
cors
、
axios
我正在做一个项目,其中
的
一部分要求我从一个特定
的
页面上
抓取
一些信息。 let
axios
= require('
axios
');
axios
.get
浏览 1
提问于2019-05-08
得票数 2
1
回答
访问div下
的
第一个<ul>元素
web-scraping
、
cheerio
我是一个网络
抓取
的
新手,我正在尝试
使用
教程
创建
一个简单
的
网络
抓取
器
。我这样做了,然而,我想尝试实现我自己
的
另一个功能。在链接()中,我试图从“指南”(页面右侧)中获取所有要点。谁知道如何修改我
的
代码,只访问div下
的
第一个ul标记,因为现在,它访问所有的ul标记。谢谢你
的
光临。 const
axios
= require('
axios
'
浏览 3
提问于2020-07-30
得票数 0
1
回答
刮除Fandango Node.js
node.js
、
web-scraping
上
的
电影列表嵌套在几个div中,这是否意味着我会执行类似于:$('div[id="page"]').find('div > div > div > div > ul > li').each
的
操作。有些电影丢失了,ul类
的
名字在日志中也不一样。这是正常
的
吗?const
axios
= require('
axios
'); const
cheerio
= requi
浏览 6
提问于2019-11-17
得票数 1
回答已采纳
1
回答
如何
使用
cheerio
抓取
动态网站?
javascript
、
reactjs
、
web-scraping
、
axios
、
cheerio
首先,请
理解
使用
翻译
器
可能不正确
的
语法。 我将在React环境中
使用
cheerio
来做web
抓取
。(仅供参考,此代码在
抓取
其他站点时运行良好): const
cheerio
= require("
cheerio
");}, []);
浏览 30
提问于2021-01-04
得票数 0
1
回答
用NightmareJS和NodeJS进行刮擦
javascript
、
node.js
、
nightmare
我想把结果保存到我
的
数据库里。我正在
使用
NodeJS (sails.js框架) const $ =
cheerio
.load(data); let title = $('.title')
的
问题在于它不是浏览
器
,也不呈现任何javascript呈现
的
网页<
浏览 1
提问于2017-05-30
得票数 4
1
回答
Vue呈现对象数组
vue.js
、
axios
、
nuxt.js
、
cheerio
我正在vue中
创建
一个基本
的
应用程序,它
使用
axios
发出get请求,从博客站点获取html数据,并
使用
来
抓取
站点中
的
元素,如博客标题和每篇博客文章
的
发布日期。但是,我很难将被刮掉
的
元素呈现到html中。= require('
axios
')const URL =
浏览 0
提问于2018-11-21
得票数 3
2
回答
NodeJs分页,递归承诺问题
javascript
、
node.js
、
recursion
、
web-scraping
、
promise
我在node.js中用
cheerio
和
axios
抓取
了多个页面我在承诺方面遇到了困难,如果我点击了最后一页,有人能帮我退还JSON吗?谢谢!const getWebsiteContent = async (url) => { pageNum = getTotalpages($); // Get t
浏览 15
提问于2021-04-04
得票数 2
2
回答
使用
Node JS从URL中提取表值
javascript
、
html
、
node.js
、
express
、
web-scraping
我是Node JS和express
的
新手,但我正在尝试建立一个提供静态文件
的
网站。经过一些研究,我发现NodeJS和Express在这方面非常有用。到目前为止,我设法提供了一些位于我
的
服务
器
上
的
静态html文件,但现在我想做一些其他
的
事情:我有一个指向html页面的URL,在该html页面中,有一个包含一些信息
的
表。这就是我到目前为止所知道
的
: 1.在端口8081上运行
的
节点应用程序,我将通过NGINX反向代理从任何地方进一步访问它(
浏览 0
提问于2019-11-11
得票数 0
1
回答
Node:如何确保
函数
只在对象
创建
后才运行?
javascript
、
node.js
我正在
使用
nodejs和
cheerio
从网站上
抓取
数据,然后它会从这些数据中
创建
一个对象。然后,它需要获取该对象并在
函数
中
使用
它。问题是,我
的
对象正在
创建
中,但在
cheerio
可以正确解析数据并将其放入对象之前,下一个
函数
已经在运行。下面是我
的
代码: request(link, function(err, resp, body) {
浏览 0
提问于2013-06-07
得票数 0
回答已采纳
2
回答
如何将node.js脚本输出定向到html页面中
的
文本区?
javascript
、
node.js
、
output
我已经
创建
了两个node.js脚本-一个用于rest请求,另一个用于将输出定向到html页面。request function outputResult(result) {} currentResultOutput.textContent = result;这是我试图指向
的
html
浏览 0
提问于2020-07-08
得票数 0
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
使用JS和NodeJS爬取Web内容
callback回调与node爬虫技术
使用Python进行网页抓取的介绍
爬虫入门——详解Python是如何进行网页抓取!
最佳免费网络爬虫工具(5)
热门
标签
更多标签
云服务器
ICP备案
实时音视频
对象存储
云直播
活动推荐
运营活动
广告
关闭
领券