1回答
从reddit URL获取原始URL
javascript、node.js、reddit
考虑这个链接：https://www.reddit.com/r/todayilearned/comments/6x6iz8/til_princess_diana_on_live_tv_shook_the_hand_of/?ref=share&ref_source=linkhttp://www.bbc.com/news/av/magazine-39490507/how-princess-diana-changed-attitudes-to-aids
浏览 0提问于2017-09-01得票数 1
1回答
先进的网页刮除
web-scraping
我想刮一个网站的一部分，让我们说: www.mywebsite.com/x1/x2您需要先打开x1，然后单击按钮，x2将作为弹出窗口打开。如果关闭x1，则无法访问x2。该网站支持JavaScript。
浏览 3提问于2015-07-20得票数 0
2回答
浏览器中的Html与Python中请求的Html不同
python、html、python-3.x、python-requests
PapaGordsmack/", headers=headers)print(html_contents)
我试图从特定用户的sky.lea.moe网站上抓取网页
浏览 20提问于2020-02-09得票数 0
1回答
在Tick Tick上登录美丽的汤4
python、beautifulsoup、webrequest
我正在尝试做一个API，它可以在python上运行Tick Tick - https://ticktick.com/signin。我试着用了很美的汤，但是我不走运。有没有人可以帮我用python登录这个网站？
浏览 45提问于2020-06-12得票数 0
1回答
获取Microsoft JScript运行时错误：'JS$‘是未定义的错误，当使用时
popup、magnific-popup
： <link href="Scripts/magnific-popup.css" rel="stylesheet" type="text/css" />JS</textarea> </ol> </form>
<script sr
浏览 3提问于2014-02-28得票数 0
1回答
带有刮刀的Web爬行器，使用木偶和刮除器
javascript、html、reactjs、selenium、scrapy
我必须抓取和刮相当多的网站，这些网站是由React / javascript / html技术组合而成的。这些网站在所有地方都有大约。10万至50万页。我计划使用Selenium和Scrapy来完成爬行和抓取。单是Scrapy就不能对页面进行抓取，使用Selenium来抓取常规的javascript/html是非常耗时的。
浏览 3提问于2019-12-04得票数 0
回答已采纳
1回答
使用Django实时显示数据
python、django
我有一个模拟器应用程序，它不断地将JSON格式的数据输出到给定的主机名和端口号(UDP)。我希望能够将模拟器输出指向Django web应用程序，这样我就可以监控/处理传入的数据。示例:类似于此页面：
浏览 2提问于2015-09-23得票数 5
1回答
Python:用js抓取网页
python、selenium、web-scraping、beautifulsoup
我正在尝试使用selenium来刮LinkedIn。例如，这里有一个页面：<div id='results-col'> ... </div>browser = webdriver.PhantomJS(executable_path=PATH)bs_obj = BeautifulSoup(browser.page_source, "html.parser")
results_col = bs_
浏览 3提问于2016-12-14得票数 0
回答已采纳
1回答
如何使用Java获取外部网页的XMLHTTPRequest响应文本？
java、xmlhttprequest
为了了解这个网页的内容，我去了，并在那里找到了我需要的所有信息XMLHTTPRequest response！如果有用的话，响应具有JSON格式。
浏览 5提问于2016-03-17得票数 0
回答已采纳
1回答
检测用户是否正在使用NodeJS访问我的网络(WIFI)
javascript、networking、node.js、wifi
我的问题是NodeJS的新手问题。我想以某种方式检测用户是否正在访问我的网络(Wifi)，并且我想指出用户是否在我的网络中。
浏览 2提问于2012-03-28得票数 0
回答已采纳
1回答
在Python中爬行网页并调用javascript函数
javascript、python、web-scraping、beautifulsoup、web-crawler
我需要抓取一个网站，然而，它的内容是动态的。Python中有没有可以调用js函数的包？例如，假设我在JS中有一个链接和JS函数1、2和3，我应该在该网页上调用，并且在所有JS函数调用之后我需要最终的网页。
浏览 16提问于2019-02-12得票数 0
1回答
使用AJAX请求抓取页面
javascript、ajax、node.js、web-scraping
我正在使用带有jsDOM的Node.js来抓取网页并在其中执行JavaScript。但是，如果页面包含AJAX请求，则不会执行这些请求。
是否有在抓取的页面中执行AJAX调用的选项？
浏览 1提问于2011-05-27得票数 4
回答已采纳
1回答
scraperjs : web抓取代码不起作用
javascript、web-scraping、phantomjs
我基本上是在写一个小的网页抓取代码。最初我使用NodeJS+Request+Cheerio来抓取网站，但后来我意识到Cheerio只适用于静态网页，而不适用于那些使用JS加载DOM对象的网页。平台: windows 7，通过CMD : node file_name.js运行var scraperjs = require('scraperjs');
console.log("
浏览 1提问于2017-08-08得票数 0
1回答
用干抓取技术抓取react.js网页
python、web-scraping、dryscrape
我在抓取用react.js编程的主页http://www.jobs.ch时遇到了麻烦。我想要在搜索框中放入术语Business并执行搜索。Dryscrape适用于另一个不是react.js页面的示例。
如何在此搜索字段中写入术语Business？
浏览 18提问于2017-03-10得票数 0
回答已采纳
1回答
使用cURL/php获取页面，但它缺少了一些东西
php、javascript、cookies、curl、get
根据一篇关于这个问题的帖子，curl可以传递cookie，但产生的行为不会被发回，因为它不会处理js返回的数据。
任何其他的建议都将不胜感激。
浏览 3提问于2013-03-21得票数 1
回答已采纳
2回答
构建一个使用Node.js在浏览器中刮RSS的网页
javascript、node.js、web-scraping、browserify
我试图构建一个网页，其主要功能包括从国家气象局(如)抓取RSS提要，然后解析输出以显示各种参数(温度、湿度等)。作为文本。我已经研究过了，似乎Node.js有几种不同的方法来抓取外部网页，并将源代码作为一个对象返回。然而，据我所知，Node.js是为服务器端应用程序设计的，而我想在人们可以访问的实际网站上使用它。我被困在以下几个方面：
如何将Node.js功能集成到网页的代码中？Node.js脚本和其他依赖项是通过浏览器中的浏览器自动
浏览 3提问于2020-07-26得票数 1
回答已采纳
0回答
如何让javascript函数运行在页面上下文中调用puppeteer函数？
javascript、jquery、node.js、puppeteer
我正在尝试制作一个自动在网页上玩游戏的机器人。到目前为止，我可以导航到网站，登录，并加载游戏页面，但我被困在这里。
我想在网页级别注入一个脚本，它使用jQuery不断地抓取网页并确定游戏所处的状态。这将通知Node.js./Puppeteer级别的函数执行。我的问题是，当页面中的自定义事件被触发时，我不知道如何让Puppeteer做出反应。例如，假设我们有一个网页级别的函数，它在1秒的超时时间内抓取X的网页。当找到X时，我想从网页</
浏览 14提问于2017-12-03得票数 0
2回答
使用javascript分页进行抓取
web-scraping
我试图抓取一个多页的网站，分页是用javascript完成的。该网页如下：我正在尝试用R进行抓取，但我对其他编程语言或程序(在Chrome、Python、Puppeteer、Phantomjs
浏览 1提问于2020-06-04得票数 0
1回答
从Python调用JavaScript (第三方库)
javascript、python
另一种方法是使用selenium和无头铬或本地node.js服务，但这两种方法听起来都很重。
浏览 0提问于2019-10-22得票数 0
云服务器
ICP备案
对象存储
实时音视频
云点播
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号