获取网页网络请求

文章/答案/技术大牛

发布

1回答

python、python-3.x、python-requests

是否可以在不使用Selenium包的情况下获取网页的网络请求？对于网络请求，我指的是各种浏览器的devtools视图中网络选项卡的输出。

浏览 19提问于2019-06-06得票数 0

1回答

要从网站上抓取数据，必须浏览多个标签。

python、html、parsing、web-scraping、beautifulsoup

我一直试图浏览网页的HTML和刮取数据。我认为我已经确定了正确的标记，但是当我将值赋值给一个列表并分出长度时，我什么也得不到。

浏览 1提问于2020-02-11得票数 1

2回答

错误310 (net::ERR_TOO_MANY_REDIRECTS)：

php、redirect

我在我的本地主机上没有收到这个错误，只有当我上传到我的服务器时，这个错误才会出现在我的一个页面上。你知道我需要改变什么吗？

浏览 3提问于2012-05-11得票数 10

回答已采纳

2回答

从html网页中提取3个值，为我的Arduino以太网上的led灯设置变量

html、arduino

我正在尝试通过网页与我的Arduino以太网通信，并更改led的RGB值。我已经按照我想要的方式设置了网页。如何获取输入到文本框中的值并在getColors()中设置它们？

浏览 5提问于2015-02-24得票数 1

1回答

检测UIWebView何时在没有委托的情况下完成加载

objective-c、ios、uiwebview

是否可以执行：在某种程度上，我知道UIWebView何时完成加载NSURL，以便我可以继续进行进一步的处理？而不是使用委托。如果不是，代表将在什么条件下工作。来进一步解释。我在一个测试应用程序中使用了以下代码：webview.delegate = self;在测

浏览 1提问于2012-06-08得票数 1

回答已采纳

1回答

用nodejs获取网络数据

node.js、network-programming

我正在寻找一种方法，从我自己的网站的网络获得完整的数据与nodejs，完全一样，在网络标签的铬开发工具。但是，补充说，我找不到任何关于它的信息。实际上，我需要的是从位于我网页上的iframe请求中获取数据。但棘手的是，这些特定的请求并没有经过我的服务器。是否有一种方式来访问这些请求，我将在网络选项卡的铬？

浏览 0提问于2018-10-17得票数 0

回答已采纳

1回答

能否解决本地网络中的公共域问题？

domain-name-system、domain、dnsmasq

能否解决本地网络中的公共域(例如：http://example.com/ )？本地网络有一个服务器，它承载一个带有域http://example.com/的网站。本地网络连接到internet。如果我从浏览器输入http://example.com/，那么请求应该转到本地DNS，从我的服务器获取我的网页，而不是公共DNS，并获取公共网站。

浏览 0提问于2021-10-09得票数 -1

1回答

社交按钮性能

php、html、performance、share-button

一旦我添加了社交按钮，我的画廊就会出现性能问题。但是我的页数增加到30秒或更多，这使得页面变得无用。

浏览 1提问于2014-03-05得票数 0

回答已采纳

1回答

如何解析具有更新的DOM的html？斯威夫特

javascript、swift、html-parsing、nsurlsessiondatatask、swiftsoup

我是相当了解编码和解析html数据从一个网站管理员。问题是，当我查看网站时，我可以手动检查的元素与源代码有很大不同。我理解这是因为“检查元素”显示了在浏览器应用其纠错和任何Javascript操作了DOM之后DOM树的状态。相关代码如下： import SwiftSoup let url = URL(string: link) do { let htm

浏览 14提问于2021-08-19得票数 0

1回答

从CNN主页抓取标题时的Xpath语法

xpath、web-scraping、scrapy

我试着用刮scrapy。当前结果:所有这些返回[]"//h2"预期结果:有人能帮我找出原因吗？CNN是在做些什么来阻止人们抓取头条新闻吗？

浏览 2提问于2019-12-29得票数 0

回答已采纳

1回答

我想从提供公共下载的网页下载文件。我对网页世界没有什么经验，所以最初我用selenium编写了一个简单的脚本来解决这个问题，但是我发现这种获取数据的方法太扭曲了。因此，我尝试通过POST请求下载该文件，对一些“网络”工具面板进行了调查，我设法找到了明显命令下载的请求。显示在图像中的按钮启动右边显示的三个请求，除非文件第一次被下载，否则会出现另一个请求(这可以在突出显示的请求上方看到)。但是，该请求的响应远不是允许我

浏览 4提问于2022-02-07得票数 0

2回答

自动完成和ajax之间的区别？

ajax、autocomplete

Ajax和自动补全功能有什么区别？我知道自动补全是一种软件功能，它可以在用户不需要完整键入的情况下完成单词或字符串。Ajax类似于它+其他功能。

浏览 1提问于2014-10-07得票数 0

1回答

Javascript列表可用连接

javascript、node.js

我试图在下拉列表中列出我的raspberry pi可以找到的所有可用连接，目的是连接到所选的连接。以下是html代码：<label for="inputlg">WiFi Connections</label> <option value="list_wi

浏览 2提问于2016-06-01得票数 0

2回答

使用python填写在线表单(下拉列表)

html、http、python-requests

如何使用python (最好是requests库)填写在线表单？在网站上<form action="http://carsalesbase.com/" class="search-form" method="get" role="search"> <input class="" id="hide-value" name="hide-value" type="

浏览 0提问于2019-03-06得票数 0

2回答

用Beautiful Soup解析Edabit - Python

python、meteor、beautifulsoup

我正在尝试编写代码，通过解析与网站上的用户关联的单个url来完成Edabit的挑战，从而获得XP的数量。这就是我所拥有的： from bs4 import BeautifulSoupurl = "https://edabit.com/user/xHRGAqa56TcXTLEMW"soup = BeautifulSoup(req.content, 'html.parser')print(div)

浏览 30提问于2020-04-26得票数 0

2回答