腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(43)
视频
沙龙
1
回答
Puppeteer
Scraper
返
回空
数据
javascript
、
node.js
、
puppeteer
我正在用
puppeteer
编写一个程序,它使用以下代码从youtube播放列表中获取歌曲标题和艺术家名称: await page.goto(url); let songs = await page.evaluate
浏览 19
提问于2020-07-24
得票数 1
回答已采纳
1
回答
使用page.evaluate: TypeError:无法读取null属性'innerText‘时出错
javascript
、
node.js
、
dom
、
web-scraping
、
puppeteer
,我是木偶师的新手,我试图从这个页面上的一个表:中抓取
数据
。<anonymous> (/Users/jamescowell/Desktop/Projects/Bobble/
scraper
/node_modules/
puppeteer
/lib/helper.js:<anonymous> (/Users/jamescowell/Desktop/Projects/Bobble
浏览 3
提问于2020-05-19
得票数 0
回答已采纳
1
回答
如何从另一个执行上下文获取Nodejs中的
数据
javascript
、
node.js
、
async-await
、
puppeteer
、
executioncontext
每当网站发生变化时,我都想从网站上获取
数据
。在本例中,我使用MutateObservable。作为
scraper
,我使用
Puppeteer
,因为
数据
每秒都会更改。也许有人可以告诉我如何解决这个问题,并将
Puppeteer
中的
数据
放入nodejs的执行上下文中。/
scraper
.js') console.log(`Der Server läuft auf Port ${por
浏览 7
提问于2020-08-25
得票数 0
1
回答
如何锁定websocket (或状态)连接直到刮板完成
javascript
、
node.js
、
web-scraping
、
websocket
、
socket.io
)const http = require('http').Server(app)const
puppeteer
= require('
puppeteer
')const mongoose = require('mongoose') const/
scraper</e
浏览 0
提问于2018-06-10
得票数 0
1
回答
木偶操纵者:使用与page.evaluate的第二个匹配
node.js
、
web-scraping
、
puppeteer
我正在使用
puppeteer
在线检索
数据
,并且遇到了一个问题。 两个函数具有相同的名称并返回序列化的对象,第一个函数返回一个空对象,但第二个函数包含我所针对的
数据
。我的代码: const
puppeteer
= require('
puppeteer
'); async function
浏览 15
提问于2020-11-27
得票数 1
回答已采纳
1
回答
在云函数上使用puppeeter进行长时间作业
node.js
、
google-cloud-functions
、
puppeteer
我需要抓取一个网页,然后我决定在
Puppeteer
中使用nodeJS云函数。 我的刮刀需要1到3分钟才能完成一项工作。我的想法是通过API调用触发函数,返回一条成功消息,然后抓取页面并将
数据
保存在
数据
库中。 以下是我的代码。const
puppeteer
= require('
puppeteer
'); return await
puppeteer
.launch(browser, page,
浏览 25
提问于2021-09-20
得票数 0
1
回答
如何使用web抓取中的变量?
javascript
、
node.js
、
reactjs
、
web-scraping
我使用以下代码抓取了一个作业门户: ;(async() => { const page = await browser.newPage()我可以在const位置下控制台记录我提取的
数据
。这是可行的!但我现在想在另一个
浏览 3
提问于2018-11-22
得票数 0
2
回答
使用Apify木偶抓取器访问和循环外部
数据
源
puppeteer
、
apify
Apify
Puppeteer
Scraper
不会在context object中公开jquery。我需要访问木偶刮板pageFunction中的一个外部JSON
数据
源,然后在其中一个节点上循环。
浏览 15
提问于2019-12-29
得票数 0
回答已采纳
1
回答
角度和木偶机安装误差
angular
、
typescript
、
npm
、
puppeteer
我已经开始了一个新的角度项目,我想刮一些
数据
从一个网站,并重新显示在我的网页。我希望开始一个新的项目,只是NPM安装傀儡机启动和运行,但编译器抛出了多个错误后,我安装傀儡。node_modules/
puppeteer
/lib/types.d.ts(3460,46): error TS1005: ';' expected. node_modules/
puppeteer
/lib: Can't resolve 'bufferutil' in
浏览 1
提问于2022-03-07
得票数 0
回答已采纳
1
回答
如何使用
Puppeteer
库返回一个值来抓取动态网页?
javascript
、
node.js
、
es6-promise
、
puppeteer
、
cheerio
我正在使用cheerio.js和
puppeteer
.js跟随这个来尝试做一些基本的web抓取。当我试图在服务器端编写它时,我并没有完全遵循教程的做法,我的想法是让我的后端处理所有的抓取,然后在将来将
数据
传递到前端。cors({ }) let {
scraper
= require('
pu
浏览 1
提问于2019-03-30
得票数 0
回答已采纳
1
回答
获取TypeError:$不是一个函数,我正在尝试刮取
数据
node.js
、
puppeteer
、
cheerio
我得到了TypeError:$不是一个函数,我试图使用nodejs中的傀儡和啦啦队从一个网站上抓取
数据
错误: at checkPrice (file:///E:/vs%20work/
scraper
/index.js:26:5) atprocessTicksAndR
浏览 3
提问于2021-10-17
得票数 0
3
回答
无法使用类型记录和木偶索引部署火基功能
typescript
、
firebase
、
google-cloud-functions
、
puppeteer
我可以让我的函数在本地工作,得到我想要的刮掉的
数据
。但是,由于以下错误,无法将此函数部署到Firebase:导出函数的index.ts文件如下所示:import
scraper
from
浏览 3
提问于2020-04-26
得票数 1
回答已采纳
1
回答
元素在页上更改时刷新
node.js
、
puppeteer
但是,当这个元素发生变化时,我想要刷新
数据
,而不使用
Puppeteer
打开新的浏览器/页面,并且只在元素更改时(2)。;var io = require('socket.io').listen(server); app.get('/', function
浏览 0
提问于2018-10-17
得票数 1
回答已采纳
4
回答
python请求问题: cloudflare错误消息"enable cookies“
python
、
web
、
request
、
python-requests
、
cloudflare
我本来打算为网站Sneakersnstuff.com创建一个基本的网络抓取器,但是由于一个错误,我的努力提前停止了。当我请求url ,而不是显示网站的html,甚至没有显示入口验证码时,我被重定向到一个带有错误消息"enable cookies“的cloudflare页面。我的代码和响应如下所示import cfscrape print(response.h
浏览 0
提问于2020-03-23
得票数 4
1
回答
jq,何时使用圆点,何时不使用
syntax
、
jq
、
abbreviation
: 24, { "name": "leumi-leumicard-bank-data-
scraper
",
浏览 0
提问于2018-03-21
得票数 6
回答已采纳
1
回答
make_searchable没有返回任何结果
python
、
postgresql
、
flask
、
flask-sqlalchemy
它似乎正确地保存在
数据
库中,但是查询没有返回任何内容。
数据
库模型:csrf = CsrfProtect(app) __tablename__ = 'latest_movies_
scraper
' id = db.Column(sa.Integer, primary_key(u'Black Panther (2018)')
浏览 0
提问于2018-02-21
得票数 0
回答已采纳
2
回答
Node.js应用程序在本地工作,但当部署到heroku时,我收到应用程序错误
javascript
、
node.js
、
heroku
、
web-scraping
我有两个文件,一个用作服务器的index.js和一个执行抓取的
scraper
.js文件。这是我的index.js文件代码: });当我运行heroku local时,它会返回我需要的
数据
的const
p
浏览 0
提问于2019-12-30
得票数 0
1
回答
木偶师/ Node.js点击按钮,只要它存在--当它不再存在时,开始行动。
javascript
、
node.js
、
puppeteer
有一个网页,其中包含许多行
数据
,并不断更新。此页将被一个“加载更多”按钮拆分,该按钮将显示到页面上显示所有存储的行为止。我需要写一个脚本,在
Puppeteer
/ Node.js中单击该按钮,直到它不再存在于页面上....read页面上的所有文本。(我已经完成了剧本的这一部分。)<anonymous> (/Users/reallymemorable/node_modules/
puppeteer
/lib
浏览 2
提问于2018-11-08
得票数 5
回答已采纳
1
回答
用木偶机实现所有相同类的
数据
抓取问题
javascript
、
node.js
、
web-scraping
、
puppeteer
、
node-modules
我试图从这个网站的价格
数据
刮使用木偶。const gb = async () => { const browser = await
puppeteer
.launch
浏览 2
提问于2022-01-04
得票数 0
回答已采纳
1
回答
无法使用傀儡滚动google地图的左窗格
javascript
、
node.js
、
web-scraping
、
puppeteer
6e6 但是我不能这么做,所以我尝试了多种方法 其中一个方法确实有效,但它几乎没有滚动100px或soo,我想加载左侧窗格中的所有元素,因为它包含
数据
的延迟加载 勉强工作的方法 await page.evaluatescrollableSection[0]); }); 我的代码 const
puppeteer
= require("
puppeteer
"); const
浏览 33
提问于2021-03-31
得票数 1
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
Excel 2019新增的这些函数,用处大不大,试了就知道
架构设计:负载均衡层设计方案——LVS原理
热门
标签
更多标签
活动推荐
运营活动
广告
关闭
领券