通过VBA实现Finviz.com网页抓取报头
的过程可以分为以下几个步骤：
- 确保已经安装了VBA环境，比如在Excel中打开Visual Basic Editor。
- 在VBA编辑器中，创建一个新的模块。
- 在模块中，编写VBA代码来实现网页抓取报头的功能。可以使用VBA的HTTP请求来发送GET请求，并获取网页的HTML内容。
Sub FetchHeaders()
Dim url As String
Dim httpRequest As Object
' 设置要抓取的网页URL
url = "https://finviz.com"
' 创建HTTP请求对象
Set httpRequest = CreateObject("MSXML2.XMLHTTP")
' 发送GET请求
With httpRequest
.Open "GET", url, False
.send
End With
' 获取网页的HTML内容
Dim htmlContent As String
htmlContent = httpRequest.responseText
' 提取报头信息
Dim headers As String
headers = httpRequest.getAllResponseHeaders
' 输出报头信息
Debug.Print headers
End Sub- 运行代码，通过调用FetchHeaders子过程来执行网页抓取报头的操作。
- 在调试窗口中，可以看到输出的网页报头信息。
这样，通过VBA的HTTP请求和相关对象，我们可以实现在Excel中抓取指定网页的报头信息。
关于VBA实现网页抓取报头的详细说明和示例代码，可以参考腾讯云的产品文档：使用VBA实现网页抓取报头。请注意，此链接仅为示例，并非实际存在的文档地址。实际上，腾讯云并没有与此特定功能直接相关的产品。
相关·内容
2回答
从具有多个页面的网站抓取数据
、、、、
https://finviz.com/screener.ashx?v=152&f=cap_midover&c=1,16,17,18,65 我想从上面的网站上使用VBA刮数据，以便我可以获得5列，我想(Ticker，EPS，EPS这个Y，EPS下一个Y，价格)。需要遍历99页，每页有20个滚动条，这意味着我需要抓取近2000行数据。我可以使用powerquery来做这件事，但是如果我使用PowerQuery，似乎需要大约3分钟来刷新数据。 我不确定如果我使用VBA抓取数据，是否能够加快数据刷新所用的时间。我是VBA的新手，下面是我的代码，它给了我整个网站页面的输出(不是我想要的
浏览 20提问于2020-12-30得票数 0
回答已采纳
我正在尝试使用python库来抓取finviz.com上的标题链接，这个库叫做报纸。我已经成功地抓取了实际网站上的链接，但当我搜索特定公司时，它带来的是空的。
以下是我的代码示例。
import newspaper
news_site = newspaper.build("https://finviz.com/")
news_site.article_urls()
上面的代码运行得很好，给了我想要的东西，但当我使用下面的代码时，它带来了一个空列表，而不是所有标题链接的列表。
import newspaper
news_site = new
浏览 1提问于2020-09-13得票数 0
我正在试用一些使用BS4开始的网页抓取。我去了一个名为finviz.com的网站，因为我在那里有一些我感兴趣的东西。
print(soup.find_all('a', class_ = 'screener-link-primary'))
当我打印上面的^时，这里有两行输出。我将如何从中提取"AGO"和"AGM"？我试着把文本线粘贴成文本，但它去掉了所有的html tags...so，我把它粘贴成了一个图像。
浏览 0提问于2018-06-29得票数 0
回答已采纳
我正在使用硒来‘废纸’网页寻找反向链接到我的网站。我一直在使用普通的curl来抓取，但是curl在JavaScript上玩得并不好(实际上它们根本不能玩)。
我的问题是，我需要来自我抓取的页面的HTTP头响应(200,301,404,503等)代码。理想情况下，我希望获得的IP地址的域名，我正在抓取以及。
我在下面的链接中使用php的facebook PHP webdriver，但我找不到如何检索任何标题信息。
我的问题是，有没有办法让Selenium返回头信息和/或IP地址？
如果您不知道这个问题的答案，那么您有没有更好的方法来抓取或获取HTTP头？
提前谢谢。
浏览 0提问于2013-04-06得票数 1
回答已采纳
2回答
有没有可能在不下载PHP库或扩展的情况下用PHP抓取网页？
现在，我可以使用PHP从网站获取meta标签，如下所示：
$tags = get_meta_tags('www.example.com/');
echo $tags['author']; // name
echo $tags['description']; // description
有没有类似的方法可以从任何给定的网站上从这个标签中获取类似href的信息：
<link rel="img_src" href="image.png"/
浏览 1提问于2013-12-04得票数 0
2回答
实际上，我正在从事我的第一个VBA项目。(来自C++)
我希望通过实现类和多态性来改进Microsoft工作簿使用的现有VBA项目。
我的问题是：
1 -我读了很多文章/论坛，解释了VBA不是面向对象编程(OOP)语言，不支持多态性。
其中一些人提出了使用关键字实现的解决办法。
2 -我还发现了一些像这样的网页，这些网页解释了如何使用Inherits、重写、等关键字在VBA中执行OOP和多态。
，所以我的问题是:
VBA是一种面向对象语言，它支持多态性吗？
浏览 6提问于2015-08-06得票数 52
回答已采纳
1回答
排除数据帧中的异常
、、、、
我有一个从Finviz中抓取数据的函数，该函数的一部分编译了一个指标列表。如果网站地址在迭代股票列表时不存在，它仍然会在Dataframe中创建一行，其中包括股票的名称，但不包括任何指标。我希望这样，如果它找不到网站，行要么在循环结束时被删除，要么根本不包括在内。任何关于我如何调整这个函数的见解都将不胜感激。 def get_fundamental_data(df):
for symbol in df.index:
try:
#url = ("http://finviz.com/quote.ashx?t=" + symbol.l
浏览 24提问于2021-02-04得票数 0
回答已采纳
我想知道，如果我使用VBA抓取脚本从网页上抓取数据，Google Analytics事件是否会被触发？我不是使用浏览器模拟，而是使用带有MSXML2.XMLhttp请求的GET对象。
例如
Set XMLreq = CreateObject("MSXML2.XMLhttp")
With XMLreq
url = "url_of_website"
.Open "GET", url, False
.send
Set HTMLdoc = CreateObject("HTMLFile")
HTML
浏览 1提问于2016-05-01得票数 0
回答已采纳
1回答
在过去的几天里，我一直在尝试用Excel VBA自动化Siebel Web。通过sendkey和一些网络抓取的组合，我已经设法查询我的数据。问题是，现在我不能调用导出小程序来保存它。我几乎搜索了所有包含"Siebel“、"javascript”标签的网站，但都没找到。由于IE开发工具被锁定，我使用VBA抓取网页，并再次尝试使用，但没有成功。
我想知道是否有人设法通过自动化将数据从Siebel导出到xml/csv/excel文件中。
我将在稍后发布我的代码，看看您是否可以帮助我。
浏览 0提问于2016-06-24得票数 0
1回答
我很想从这个网站上看到数据：
我想刮整张桌子。我试过用这个：
function myFunction(start) {
var url = "https://finviz.com/screener.ashx?
v=141&f=sh_avgvol_o500,sh_curvol_o2000,sh_price_u50&o=-volume&r="+
start;
var fromText = '<tbody>';
var toText = '</tbody>';
var c
浏览 6提问于2017-09-26得票数 1
回答已采纳
我浏览了Scrapy的教程，并且我能够理解如何废弃教程中包含的站点。但我在一些更复杂的网站上遇到了一些小麻烦(至少对我来说是这样)。
我正在尝试从这个网页中抓取内幕交易的行和列：
我正在使用带有scrapy的命令提示符命令来测试我是否能够抓取必要的信息，因此以下命令是我在命令提示符中编写的命令。
scrapy shell "http://finviz.com/insidertrading.ashx"
然后我使用firefox中的firebug来查看页面的html代码。
我可以通过以下代码将一些信息(股票名称、内部人士姓名和日期)添加到列表中：
response.css(
浏览 2提问于2016-12-22得票数 1
回答已采纳
2回答
我试着做一些简单的web抓取，我不断地得到这个错误，我不确定哪里错了，因为我对python相当陌生。
异常:需要一个类似字节的对象，而不是'str‘。
import time
import urllib.request
import urllib.parse
stock = 'a'
def finvizKeyStats(stock):
try:
sourceCode = urllib.request.urlopen('http://finviz.com/quote.ashx?t='+stock).read()
浏览 8提问于2016-12-19得票数 0
回答已采纳
我正在做一些网页抓取使用excel vba。
在我的程序中，有一次我的internet explorer实例打开了一个OpenFileDialog。我需要访问此对话框，并为其提供一个文件名。有没有办法在vba中做到这一点？
我的想法是获取窗口句柄(我已经这样做了)，然后以某种方式使用句柄获取对象，但我找不到使用句柄访问窗口的方法。
浏览 0提问于2012-11-06得票数 0
回答已采纳
1回答
我想从https://finviz.com/quote.ashx?t=amzn中的表中抓取最后一行(从‘Recom’开始 不幸的是，在代码Children(x)的输出部分中，我的代码错误: Object variable或With block variable没有设置。 你能帮助我理解为什么代码错误，即使html的层次结构是尊重的吗？ 谢谢! Dim y As Long
Dim x As String
Dim lastrow As Long
Dim elem As Object, tRow As Object, S$, R&
lastrow = Sheets("Tabl
浏览 15提问于2020-10-04得票数 0
回答已采纳
从bs4导入请求导入BeautifulSoup
user_agent = {'User-Agent' : 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/72.0.3626.121 Safari/537.36'}
page = requests.get("https://www.whoscored.com/Regions/252/Tournaments/2/England-Premier-League", header
浏览 8提问于2019-11-22得票数 0
1回答
这似乎是一个愚蠢的问题，但是否有可能只检索网页的一部分(例如，让服务器只发送特定的<div>)？我知道只有是可能的。
我认为这直接违反了HTTP GET的工作方式，但我还是决定问一问。
我正在考虑网络抓取数千个页面，我注意到数据使用率变得相当高。我不需要整个页面，只需要相关的部分。
浏览 0提问于2016-04-23得票数 0
1回答
因此，在构建我的股利投资组合电子表格时，我从finviz网站上提取了相关股票的年收益率%值，尽管价值提取工作非常好，但当我试图找到包含这些值的单元格的平均值时，问题就出现了。
例如，在下表中:单元格B2使用公式通过提取VTI的Annual Dividend Yield% (在单元格A2中)。
=IF(SUBSTITUTE(index(IMPORTHTML("http://finviz.com/quote.ashx?t="®EXEXTRACT(A2, "[^:]+$") ,"table", 9),8,2),"",
浏览 2提问于2020-11-19得票数 1
回答已采纳
我有一个任务要抓取所有的普利策获奖者，我发现这个网页有我想要的：。
但我有以下问题
问题1:如何抓取动态页面？我使用python/urllib2.urlopen来获取页面的内容，但是这个动态页面并不返回真实的内容。
问题2: --然后我从devtool：中找到了一个API。但是，当我从urllib2.urlopen发送GET请求时，我总是获得null。这是怎么发生的？或者我该怎么处理呢？
如果这对你来说太天真了，请说出一些单词，这样我就可以从谷歌学到它了。
提前感谢！
浏览 3提问于2019-03-19得票数 1
回答已采纳
微软与Excel 集成概述
他们将C、VBA和COM作为单独的API列出.网页上有两个看似自相矛盾的陈述：
--一
C API和XLLs:与Excel集成的DLLs。这些DLL为添加高性能工作表功能提供了最直接和最快的接口，尽管与后来的技术相比，其代价是一些复杂性。
-- 2
由于在Excel版本5中引入了( VBA )工作表，在版本8 (Excel 97)中引入了Visual (VBE)，因此用户自定义Excel的最简单方法是使用VBA而不是XLM。因此，在以后版本的Excel中引入的许多新功能可以通过VBA获得，但不能通过XLM或C获得。例如，一些命令、事件陷阱和增强的对话框功能
浏览 2提问于2017-01-16得票数 2
回答已采纳
我正在尝试使用file_get_contents列出网页的内容。页面类型似乎是ashx
但是，如果我使用诸如http://stackoverflow.com/questions/3629504/php-file-get-contents-very-slow-when-using-full-url之类的url。它起作用了
代码
$lines = file_get_contents('http://finviz.com/screener.ashx?v=321&f=sh_price_u1&r=11');
echo $lines;
浏览 0提问于2011-10-20得票数 0
回答已采纳
我在VBA中经常使用QueryTables从网页中抓取数据。我想知道是否有一种方法可以保留查询从其中提取数据的网页所具有的超链接。 下面是一个查询示例： With ActiveSheet.QueryTables.Add(Connection:= _
"URL;http://dom.com/table, Destination:=Range("$A$1"))
.Name = "table"
.FieldNames = True
.RowNumbers = False
.FillAdjacentFormulas = False
.Preserv
浏览 55提问于2020-11-06得票数 0
回答已采纳
2回答
最近，我试图在一个iframe中加载youtube网站，但我检查了它是否有效。我用了这个简单的代码。
<!DOCTYPE html>
<html>
<head>
<title></title>
</head>
<body>
<iframe width="1000px" height="700px" src="http://www.youtube.com" ></iframe>
</body>
</html>
我想
浏览 1提问于2013-11-07得票数 27
回答已采纳
我知道regex可以用来限制将要下载的页面。但是，我想只爬行那些网页中的锚链在一个给定的网页中的一组网址。例如，我有一个包含“计算机”、“软件”、“硬件”、“操作系统”、“线程”等词的数组，我只想抓取那些锚点文本包含数组中这些词之一的urls。在Nutch中我应该在哪里实现这种逻辑？谢谢。
浏览 1提问于2016-01-28得票数 0
1回答
我的B3是卡普。这是股票代码。这个导入XML应该得到年股息收益率为5.76%的数字，但是我得到一个错误：“导入的内容是空的”--当我不试图引用B3单元时，获取年股息收益率，所以刮取与这个网页是兼容的。它试图从B3中获取值是有问题的。
=IMPORTXML("https://finviz.com/quote.ashx?t="&B3, "/html/body/div[4]/div/table[2]/tbody/tr[8]/td[2]/b/span")
浏览 1提问于2022-01-04得票数 1
回答已采纳
1回答
我是第一次尝试使用VBA进行网络抓取，在那里我试图从我们公司的分销商那里把某些产品的价格刮到一个excel文件中，供我们的销售人员分析。
本质上，我是拿我的工作簿上列出的URL，然后从网页上拿出价格，然后把它放在旁边。
我目前的问题是，我找不到元素和/或代码来获取网页上的实际价格--这是我目前的代码。
Dim wkbDest As Workbook
Dim URLtab As Worksheet
Set wkbDest = Workbooks("Price Check list Gold and Silver.xlsx")
Set URLtab = Worksheets(
浏览 1提问于2022-01-19得票数 0
这就是我所能得到的。如何使用Python和BeautifulSoup或Pandas从Finviz.com中抓取最大赢家和最大输家的表行？ import requests
from bs4 import BeautifulSoup
r=requests.get("https://finviz.com")
c=r.content
soup = BeautifulSoup(c, "html.parser")
table =soup.find("table", {"class": "t-home-table"})
浏览 15提问于2020-04-09得票数 1
我对Scrapy非常陌生。我设法创建了一个Scrapy项目，运行它来抓取网站，并将废弃的信息保存在csv文件中。然而，每次我运行它，似乎被抓取的网页的数量和顺序都不同。我很确定这个网站在这段时间内是静态的。一般来说，这是正常的吗？
浏览 0提问于2014-03-08得票数 0
2回答
我一直在用PHP为一个内部应用程序创建一个网页抓取器，但是其中一个页面有一个JavaScript登录，有没有办法像往常一样自动登录来抓取数据？
(我正在使用curl登录到其他两个站点)
浏览 0提问于2010-07-23得票数 1
回答已采纳
2回答
我使用这段代码从word VBA抓取实例，并从网页中抓取一些值。我正在循环浏览4个条目(以防万一，有时我意外地抓取了一个叫做"Windows“的东西，我不知道它是什么)来抓取Internet。但是在我开始抓取值之前，我想确保我的标签名是“概述-城市”。如何对标签名进行测试？
Dim shellWins As ShellWindows, IE As InternetExplorer
Dim i As Long
Set shellWins = New ShellWindows
'Find Internet Explorer - if it can't find it,
浏览 1提问于2018-03-07得票数 0
回答已采纳
我想使用VBA从网页中获取一个表，但我不能直接访问它，因为我需要从一个选项卡切换到另一个选项卡。问题在于网页的URL端( .aspx不会相应地演变)。
网址：
我已经设法构建了将表导出到Excel工作表的代码，但缺少“导航”部分。
下面是关于单击"Long Terme Tab“按钮的HTML代码：
我的起点是这里(ProcessHTMLPage进行表格抓取)：
Sub Browse_Morningstar()
Dim XMLPage As New MSXML2.XMLHTTP60
Dim HTMLDoc As New MSHTML.HTMLDocument
XMLPage.
浏览 0提问于2018-01-14得票数 1
1回答
我正在尝试使用wget抓取一个网站。下面是我的命令：
wget -t 3 -N -k -r -x
-N的意思是“如果服务器版本比本地版本旧，就不要下载文件”。但这不管用。当我重新启动上面的抓取操作时，相同的文件被一次又一次地下载-即使这些文件没有任何更改。
许多下载的页面报告：
上次修改的标头丢失--时间戳已关闭。
我已经尝试抓取了几个网站，但到目前为止所有的尝试都给出了这个问题。
这是由远程服务器控制的情况吗？他们是否选择不发送这些时间戳头？如果是这样的话，我可能对此无能为力？
我知道-NC (no clobber)选项，但这将防止现有文件不被覆盖，即使服务器文件较新，也会导致过时的本地数据
浏览 2提问于2011-02-11得票数 4
回答已采纳
我正在为学校做一个项目，我正在尝试从我的树莓派上的网页中读取数据，并将其显示在我的PC网页上。我正在使用ajax，但当我尝试访问IP为192.168.1.8的RPi上的网页时，它给出了一个：“error403 forbidden”错误，所以我不知道该怎么办
我访问该页面的代码如下：
function AddShoots() {
$.ajax({
method: "POST",
url: "http://192.168.1.8",
success: function (html) {
alert(html);
},
浏览 0提问于2020-04-07得票数 0
接下来的另一个问题，我尝试使用标题作为唯一标识符，但最终发现它们在我使用的网站上不是唯一的。但是，每个页面的注释中都包含一个唯一的标识符。
使用Capybara，我如何访问网页上的评论？具体地说，是在第一个html之前的根部的注释。在其中，我至少可以使用水豚抓取包含注释的元素(即使我不能抓取注释)，但我似乎根本不能从根开始。
浏览 2提问于2011-10-13得票数 1
回答已采纳
1回答
类中的Access类
、、、
我正在尝试创建一个简单的Excel VBA web抓取宏。在某一时刻，我需要宏来单击一个按钮(在封闭的图像lower -button class="edit"中)，该按钮位于特定的class="title">TitleName中。在网页上，有多个TitleName，我总是需要转到特定的TitleName并单击特定于TitleName的编辑按钮。
有没有人能帮我弄一下宏？HTML代码如下图所示：
浏览 5提问于2018-01-24得票数 1
回答已采纳
2回答
我试着用Beautifulsoup4 python模块通过web抓取来获取网页的标题，它返回了一个字符串“无法接受！”作为标题，但是当我通过浏览器打开网页时，标题是不同的。我试着循环浏览链接列表和所有网页的标题，但是它返回的字符串是“不能接受的！”所有的链接。
这里是python代码
from bs4 import BeautifulSoup
import requests
URL = 'https://insights.blackcoffer.com/how-is-login-logout-time-tracking-for-employees-in-office-done-by
浏览 18提问于2022-03-01得票数 0
回答已采纳
我最初的搜索表明，出于安全原因，我可能无法做到这一点，但我还是会问。我如何获得的颜色任何指定的像素在网页上？
更具体地说，这是我自己的网页，其中包含背景颜色，图像，css修改-元素。我需要知道的颜色，一个特定的像素在充分渲染网页。信息不能从屏幕抓取，因为我想修改我的全面渲染页面。
哎哟!！有人真的因为我问了真正的问题而“减1”了吗？强硬的人群！
更具体地说:我想在网页中添加一个用户可移动的画布元素，在视觉上改变画布悬停的部分。将画布元素看作是用户可以在网页上移动的放大镜。但是我希望画布元素产生的实际效果是一个颜色过滤器(因此需要底层颜色)。
浏览 2提问于2013-01-07得票数 8
回答已采纳
3回答
我正在使用Selenium登录到网页，并获得网页进行抓取，我能够获得该页面。我已经在html中搜索了我想要抓取的表。这就是：
<table cellspacing="0" class=" tablehasmenu table hoverable sensors" id="table_devicesensortable">
脚本是这样的：
rawpage=driver.page_source #storing the webpage in variable
souppage=BeautifulSoup(rawpage,'html
浏览 0提问于2018-02-21得票数 1
我们使用WP引擎作为我们的网站主机。我添加了一些Web规则来生成以下HTTP头：
X-XSS-Protection: 1; mode=block
X-Content-Type-Options: nosniff
Referrer-Policy: origin-when-cross-origin
Feature-Policy: geolocation 'self'
X-Frame-Options: SAMEORIGIN
Content-Security-Policy: upgrade-insecure-requests
由于进行了上述更改，下一次Ahrefs.com站点审计为一些B
浏览 2提问于2021-12-01得票数 1
回答已采纳
我一直在尝试使用VBS/VBA从网页中抓取数据。
如果它是Javascript，我会远离它，因为它很容易，但它在VBS/VBA中似乎不是那么直接。
这是我为回答而做的一个例子，它是有效的，但我计划使用getElementByTagName访问子节点，但我不知道如何使用它们！HTMLElement对象没有这些方法。
Sub Scrape()
Dim Browser As InternetExplorer
Dim Document As HTMLDocument
Dim Elements As IHTMLElementCollection
Dim Element As IHTMLElement
浏览 0提问于2013-03-04得票数 13
回答已采纳
我想下载一个网页列表(超过一百万个网页)，我只想下载英文网页，我该怎么做才能指定语言？我试过了
org.jsoup.nodes.Document htmlDoc = Jsoup.parse(html);
Element taglang = htmlDoc.select("html").first();
System.out.println(taglang.text());
但它不起作用。
谢谢你的帮助
浏览 0提问于2015-08-14得票数 0
我正在开始一个项目，想知道图像中的人物和图像所在的整个网页之间的关系。
我想抓取一些图像和他们的网页。我需要将抓取结果保存在本地磁盘中以供进一步分析。我想知道这个问题有没有开源的？
浏览 0提问于2010-06-16得票数 0
我正在尝试使用selenium从网页中抓取一些数据。我已经成功地让selenium在树莓派上无头工作，我可以连接到我试图抓取的网页，返回页面的标题，并返回我连接到的URL。
我一直在看教程中关于如何抓取数据的示例，它们都是这样的：
titles_element = browser.find_elements_by_xpath(“//a[@class=’text-bold’]”)
然而，我试图抓取的网页中的每一块数据都有相同的类名。举一个我试图抓取的第一位数据的例子，我试图得到wins的值是4：
第二个示例是im尝试抓取的数据，在本例中为kill，值为559：
我试图抓取的两个数字共享相同的
浏览 5提问于2021-03-16得票数 0
如何使用Python计算网页(url)的大小？我尝试了urllib2并抓取了content-length报头，但它不存在。
import urllib2
url = 'http://www.google.com/'
r = urllib2.urlopen(url)
#Not sure what to do from here
浏览 3提问于2009-10-23得票数 2
回答已采纳
到目前为止，我有这个方法：
+ (CGSize) imageDimensions: (NSString *)url {
NSURL *imageFileURL = [NSURL URLWithString: url];
CGImageSourceRef imageSource = CGImageSourceCreateWithURL((__bridge CFURLRef)imageFileURL, NULL);
if (imageSource == NULL) {
return CGSizeMake(0, 0);
}
CGFloat width = 0.0f, height = 0
浏览 0提问于2013-05-22得票数 3
回答已采纳
我使用一个for循环从Finviz中抓取了几个财务指标，该循环迭代了一系列股票代码。我在Finviz上遇到了一个空值('-')的问题，导致数据子集的问题，因为它被识别为字符串而不是浮点数，就像我试图子集的值一样。我想将这些值设为空，并且一直在尝试使用Pandas模块中的replace函数，但没有任何运气。理想情况下，它会在迭代第二个for循环时将其置为空，这样它就会在迭代过程中进行迭代，而不是必须在之后对整个列表进行迭代。代码如下所示： # Import Libraries
import pandas as pd
from bs4 import BeautifulSoup a
浏览 48提问于2021-02-03得票数 1
回答已采纳
我正在编写VBA网络抓取软件，从网络上抓取产品名称，并将它们添加到Excel工作表。这段代码一分钟前还能正常工作，然后突然就停止了抓取信息。你知道问题出在哪里吗？网站仍在运行，未更改任何已检查的变量。下面是我的代码： Dim http As New XMLHTTP60, html As New HTMLDocument, x As Long
With http
.Open "GET", "https://www.notebooksbilliger.de/pc+hardware/grafikkarten+pc+hardware/amdati/rx+6600+a
浏览 31提问于2021-10-20得票数 0
我正在尝试通过php/curl登录一个使用X-CSRF令牌进行身份验证的网站。用LiveHttpHeaders查看Firefox中的头文件，我看不到令牌在任何GET请求中通过cookie传递……它似乎只是出现在POST登录请求的头部以及POST登录字段中。关于如何通过php/curl登录使用这些令牌的站点，您有什么想法吗？如何抓取令牌并将其与用户名和密码一起包含在post_fields curl_setopt中？
浏览 3提问于2013-03-01得票数 1
1回答
免责声明:如果已经发布了重复的问题，初学者将删除
我希望创建一个脚本，它将从多个网页抓取数据，并将其存储为dataframe中的列。正如您从下面可以看到的，我可以成功地获取一只股票的数据，我想知道有人有什么想法来修改这个，这样我就可以使用类似的
stocklist = ["AMZN", "GOOG", "TSLA"]
脚本如下：
from time import sleep
from selenium import webdriver
import pandas as pd
driver = webdriver.Chrome('/c
浏览 1提问于2020-06-01得票数 0
回答已采纳
3回答
我正在用Django web框架用Python制作一个网络抓取应用程序。我需要用漂亮的汤库抓取多个查询。下面是我写的代码的快照：
for url in websites:
r = requests.get(url)
soup = BeautifulSoup(r.content)
links = soup.find_all("a", {"class":"dev-link"})
实际上，网页的抓取是按顺序进行的，我想以并行的方式运行它。我对Python中的线程化不是很了解。谁能告诉我，我怎样才能并行抓取？任何帮助都将不胜感激。
浏览 0提问于2017-05-29得票数 2
1回答
我试图刮一个网页，在那里需要寻找一些ID。我在Selenium驱动程序中使用Python。
为了访问搜索屏幕，我尝试找到“搜索”按钮并点击它。我尝试过许多方法来完成这个任务，但是在Python中我总是得到一个异常。我过去经常用VBA IE抓取来调用这些链接，这真的很容易。
当检查Chrome上的HTML时，元素如下：
"a target="content" href="search/search/BaseFormular.start"
id="Search.Customer" onmouseover="nav_enter(
浏览 4提问于2022-07-11得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM活动推荐
腾讯云开发者
