腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
有没有可能用NodeJS
抓取
任何给定的网址?
node.js
、
web-scraping
我已经阅读了一些关于
抓取
的文章,似乎NodeJS、ExpressJS、Request和Cheerio是我作为一个熟悉
JS
/jQuery的前端人员的首选方法。到目前为止,我读过的所有文章都集中在没有API的情况下从特定网站上
抓取
数据,而我想要实现的是一个工具,它可以获取任何给定的URL,并返回true/false来列出正在使用的通用库和链接的社交网络。由于CSS选择器,我选择的设置(如上)是合适的,还是仅限于
抓取
特定页面?
浏览 0
提问于2014-08-07
得票数 0
2
回答
抓取
使用javascript注入html的网站
node.js
、
web-scraping
我试图用Node.
JS
抓取
一个网站,但当
抓取
html文件时,出现的东西是注入JavaScript的脚本
标签
,在查看有问题的JavaScript文件时,我似乎是正确的,因为我发现了我试图
抓取
的文本。在这个脚本被注入到html之后,我如何
抓取
文档?有什么办法吗?谢谢
浏览 22
提问于2020-11-04
得票数 0
回答已采纳
2
回答
除非启用了Javascript,否则使用php函数
php
、
javascript
、
ajax
我有一个网站,将
抓取
新的数据在第一页访问。我想使用AJAX来做这件事,这样我就可以在
抓取
过程中向用户提供至少一些loading.gifs,但这只有在启用了Javascript的情况下才能实现。我的站点使用了一个PHP模板引擎,所以我想把
抓取
函数放在html模板的<noscript>标记中。因为这将在所有PHP代码之后发生,所以我必须重新加载页面,以便可以使用PHP呈现/解析
抓取
的数据。
浏览 0
提问于2011-01-16
得票数 1
1
回答
抓取
网站未返回正确的源代码
python
、
web-scraping
、
beautifulsoup
、
python-requests
我正在尝试用Python
抓取
一个quizlet匹配集。我想用class:TermText
抓取
所有的<span>
标签
import requestsraw最终返回的内容根本不包含任何
标签
或卡片当我检查网站的源代码时,它显示了我需要的所有TermText跨度,这意味着它不是
JS
加载的。因此,我不明白为什么我的HTML是错误的,因为它没有包含任何我需要的html。
浏览 18
提问于2020-07-31
得票数 1
回答已采纳
2
回答
我可以在
JS
文件中使用liquid吗?
javascript
、
liquid
我正在使用Shopify,如果存在特定的产品
标签
,我需要显示一些消息。我需要检查
JS
文件中的产品
标签
,并需要知道如何做到这一点。我尝试在
js
文件中使用{{product.tags}},但得到一个错误,我也尝试在.
js
.liquid文件中使用它,但它仍然抛出错误。' %} {% endif %}有没有办法让我在
js
如果没有,如何在
浏览 0
提问于2019-08-24
得票数 1
2
回答
从网页中提取内容数据
web-scraping
我希望从网页urls获得结构化文章数据。到目前为止,我已经找到了这两个服务和。有没有更好的替代方案,或者自己写代码来做这件事值得吗?
浏览 2
提问于2014-10-07
得票数 0
1
回答
如何使子节点不能单独拖动?
drag
、
cytoscape.js
在我的cytoscape.
js
图中,我有一个具有多个子节点的复合节点。这些孩子中的一些(但不是全部)只被设计成
标签
,而且由于我设置了一个最小缩放字体大小,这些孩子在低缩放级别上是看不见的。尽管如此,如果有人试图
抓取
复合节点来拖动它,很有可能他们会击中一个不可见的节点,然后拖动它。为了避免这种情况,当我检测到图形处于缩放级别时,
标签
将不会显示,我尝试使用ungrabify()将这些子节点设置为不可
抓取
。然而,这有一个不幸的影响,当我
抓取
并拖动父复合节点时,不可见的不可
抓取
浏览 4
提问于2015-07-07
得票数 0
回答已采纳
1
回答
of无法自动获取视频的缩略图
php
、
html
、
html5-video
、
video.js
我正在使用基于"video.
js
"的HTML5
标签
在my browser.But上显示视频--它不能
抓取
视频的第一帧并在开始之前显示为视频缩略图,有人建议我如何在视频
标签
中不使用“海报”
标签
而自动获得图像
浏览 3
提问于2013-12-13
得票数 0
3
回答
将变量从
JS
传递到VB.net
javascript
、
asp.net
、
vb.net
我有一个变量,它在
js
函数中获取一个值。我需要将它的值作为双精度值放入vb.net变量中。
Js
部分。
浏览 0
提问于2011-08-18
得票数 8
回答已采纳
1
回答
将JavaScript评估为WKWebView以获取视频URL不起作用
javascript
、
ios
、
swift
、
url
、
wkwebview
因此,我尝试通过将javascript求值为WKWebView来获取视频源地址。我试着搜索了很多不同的帖子,但都没有找到我想要的。我正在尝试从我在WKWebView中打开的Dailymotion.com下载视频。现在,在我的WKWebView的委托方法中,我传递了Webview的当前URL来计算JavaScript,这样我就得到了视频URL。 func webView(_ webView: WKWebView, didStartProvisionalNavigation navigation: WKNavigation!) print("wkweb
浏览 295
提问于2019-05-29
得票数 0
2
回答
python
抓取
网页并解析内容
python
、
json
、
parsing
、
web-scraping
、
data-cleaning
我想要
抓取
此链接上的数据 import requests source2=urllib2.urlopen(url).read() source2的类型为st
浏览 0
提问于2016-11-10
得票数 1
2
回答
如何定期检查最新稳定版本的铬?
javascript
、
google-chrome
我试着看过谷歌的git,我看到了很多不同版本号的
标签
。对于如何定期检查与
js
代码一起发布的新铬版本,有什么建议吗?我不知道我需要做什么数据
抓取
,如果有的话。
浏览 10
提问于2022-04-05
得票数 0
回答已采纳
1
回答
是否有将内联样式转换为css类的包?
html
、
css
、
npm
如果我通过了有什么包裹会回来.foo { height: 500px;
浏览 1
提问于2020-01-26
得票数 2
回答已采纳
1
回答
可用于在<span>标记内获取数据的bs4
python
、
web-scraping
、
beautifulsoup
、
ip
我正试着用网络
抓取
得到我的位置。所以我决定使用nordvpn(赞助商XD)网站来找到我的位置。我打开开发工具,发现列出位置的部分在span选项卡中有class =
js
-ipdata-location。 问题是当我解析它的时候,我只是得到了span
标签
作为输出。和...作为
标签
之间的文本。headers = header) loc = bs_obj.find('span', class_ = &
浏览 21
提问于2020-09-08
得票数 1
回答已采纳
1
回答
当尝试安装Google分析代码时,google tag assistant报告:“同一个web属性ID被跟踪两次”
google-analytics
、
google-tag-manager
我试图将谷歌分析代码安装到我们的谷歌
标签
管理器中,一开始我安装了GTM,并添加了一个我从跟踪ID
抓取
的
标签
,但之后,它似乎没有出现在我的账户上的分析仪表板。-- Global site tag (gtag.
js
) - Google Analytics --> <script async src="https://www.googletagmanager.com/gtag/
js
?window.dataLayer = window.dataLaye
浏览 0
提问于2020-07-07
得票数 0
1
回答
爬虫不读取我的javascript附加的meta
标签
javascript
、
html
、
jquery
、
meta-tags
爬虫在我的头中没有通过脚本附加的meta
标签
:有没有合适的
JS
代码格式可以不阻止爬虫
抓取
我的脚本?
浏览 1
提问于2020-12-15
得票数 1
1
回答
使用webpack的服务器端渲染
javascript
、
reactjs
、
webpack
、
webpack-dev-server
、
page.js
我正在使用Reactjs,webpack和page.
js
(路由)来构建一个webapp应用程序。Webpack给了我一个加载在客户端的bundle.
js
。我发现如果我在客户端加载og Meta
标签
就无法
抓取
它们,所以我必须在服务器端实现它(服务器端渲染)。有没有办法实现它? (我在网上找不到关于这方面的适当文档)。
浏览 6
提问于2015-08-14
得票数 4
1
回答
抓取
问题(data-reactid)
java
、
html
、
automation
、
web-scraping
、
imacros
我正在尝试
抓取
一个网站,并根据我提取的数据编辑一个电子表格。我对
抓取
没有太多的经验,但我的方法是在html
标签
中找到独特的属性,并用它来
抓取
我想要的东西。所以对于这个网站,我的方法是首先
抓取
页面的URL列表,当你点击其中一个体验时,例如:, 其次,在这个列表中循环,每次都要
抓取
相关的属性。然而,我被困在了第一步,因为我遇到的不是简单的"a href“
标签
,而是"data-reactid”
标签
,
浏览 2
提问于2015-04-30
得票数 2
2
回答
如何使用PHP dom内链接来
抓取
HTML
php
、
html
、
web-scraping
、
domdocument
我有一个关于HTML网络
抓取
的问题。id=291064327770896" aria-owns="
js
_0" aria-haspopup="true" aria-describedby="
js
_1" id="
js
_2"> NCR Businessid=158649140871478" aria-owns="
js
_0" aria-haspopup="true" a
浏览 1
提问于2015-07-18
得票数 0
1
回答
使用Python PyQt对Javascript内容进行网页
抓取
javascript
、
python
、
web-scraping
、
pyqt
我现在正在执行一项任务,系统地从似乎是由javascript呈现的课程列表中
抓取
内容。我在web上使用PyQt4遵循了一些脚本,但失败了(我在下面复制了它)。相反,它使用
标签
容器和FTP来存储和加载信息(我从其源代码中找到)。 我想知道是否有任何方法可以修改以下脚本,以便我可以使用PyQt4
抓取
这些内容,或者我必须寻找其他方法来实现此目的?
浏览 17
提问于2016-09-21
得票数 3
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
Python项目实战:抓取大型网站JS特效模板
基于D3.js实现分类多标签的Tree型结构可视化
Python数据抓取(3)—抓取标题、时间及链接
网页视频抓取插件-免费网页视频抓取插件
抓取整个网站-免费抓取整个网站数据信息软件
热门
标签
更多标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
活动推荐
运营活动
广告
关闭
领券