使用rvest抓取HTML数据

文章/答案/技术大牛

发布

1回答

html、r、rvest

我正在为一个数据科学101项目搜集曲棍球参考资料。我遇到了一个特定表的问题。其网页是：。所需的表在“高级统计报告(所有情况)”下。我已经尝试了以下代码：ret <- url %>% html_text() 这段代码从上面的表中抓取所有数据，但在高级表之前

浏览 20提问于2017-08-31得票数 1

回答已采纳

1回答

使用rvest抓取名称相似的表

r、xpath、web-scraping、rvest

我正在尝试使用rvest从fbref.com上的不同页面抓取数据表。我已经能够使用以下命令从一个页面中抓取数据：URL <- "https://fbref.com/en/squads/822bd0ba/Liverpool"passStats <- WS %>

浏览 5提问于2020-06-02得票数 1

回答已采纳

2回答

我在试着抓取网站 https://www.basketball-reference.com/playoffs/NBA_2021_standings.html 用于扩展的排行榜。我已经使用rvest库尝试了许多变体，但似乎都不能正常工作。使用的最新代码是： url = "https://www.basketball-reference.com/playoffs/NBA_2021_standings.html</

浏览 40提问于2021-11-14得票数 0

1回答

R-如何使用rvest或rcurl点击网页

r、web-scraping、rcurl、rvest

我想从下载数据library(rvest)url <- "http://www.tradingeconomics.com/" html_table() 但是像这样的网页有一个问题。有一个+按钮可以

浏览 0提问于2015-03-22得票数 20

回答已采纳

1回答

使用rvest从闪存页面中刮取数据

r、rvest

我正在尝试从这个页面中抓取数据： names <- read_html("http://www.atpworldtour.com/en%>% 万事如意。不幸的是，如果我试图抓取下面的统计<em

浏览 2提问于2016-06-05得票数 0

回答已采纳

1回答

在使用带rvest包的xpath进行擦除时，下标超出界限错误

r、rvest

我正在尝试使用rvest包从一个网站上抓取一张表：uci_html <- read_html("http://archive.ics.uci.edu/ml/datasets.html") html_nodes(xpath="/<e

浏览 2提问于2017-04-17得票数 0

1回答

从R中的网站中提取数据，并将其作为R表播放

r、shiny、shinydashboard

我正试图建立一个财务仪表板在闪闪发光，并被困在第一步。我想写一篇下表的文章并在我闪亮的环境中把它展示成一张桌子。类似于下面的内容，但是表格应该显示任何一个链接的内容，而不是随机的正态分布。 sliderInput(inputId = "num", value = 25, min = 1, max = 100),) server <

浏览 4提问于2021-12-15得票数 -1

回答已采纳

1回答

利用rvest从Facebook上抓取图像src

r、facebook、facebook-graph-api、rvest

我使用rvest包来抓取Facebook的帖子并提取img src url。library(rvest)UrlPage %>% html_node("#fbPhot

浏览 4提问于2016-01-08得票数 0

1回答

使用rvest抓取HTML* data.table*

r、rvest

我正在尝试使用R rvest包从中抓取“鱼肉样本”表数据。我使用chrome扩展SelectorGadget来查找表的xpath。我无法从网页中获取任何表格数据到R.非常感谢您的帮助。library(rvest) urllakes<- read_html("http://www.dnr.state.mn.us/lakefind/showreport.html?downum=27

浏览 1提问于2017-10-01得票数 0

回答已采纳

1回答

R: URL上的readLines导致缺少行

r、web、html-parsing

使用上面的URL时，CTR +F将查找与"TV-“匹配的38个文本实例。另一方面，当我运行readLines()和grep("TV-", HTML)时，我只找到12个。那么，如何避免编码/间距错误，以便获得完整的HTML行呢？

浏览 6提问于2020-10-27得票数 0

回答已采纳

2回答

使用RVEST对<dl> <dt> <dd> html标记进行网络抓取

html、r、web-scraping、rvest

我正在尝试使用rvest从二手车广告中提取一些数据。但是，我无法使用html_nodes()函数抓取构成< dl >、< dt >或< dd > html标记的数据。更具体地说，我想在下面的数据框中抓取下面汽车广告的图像中的特征。谢谢!阿恩

浏览 2提问于2020-05-07得票数 0

1回答

and抓取选择器小工具和rvest的问题

r、web-scraping、screen-scraping、rvest

我正在尝试使用SelectorGadget和rvest从https://3g.dxy.cn/newh5/view/pneumonia中抓取数据我用下面的代码成功地抓取了页面中的一些文本。library(rvest)webpage <- re

浏览 16提问于2020-01-28得票数 1

回答已采纳

2回答

抓取R中的tbody类对象

r、web-scraping、dplyr、rvest、rselenium

我对使用R进行web抓取是完全陌生的，我想抓取下表(图片)，它的行为就像tbody一样。如果我运行以下代码，我只看到标题，没有数据(捷克语网站)。library(dplyr) Page <- rea

浏览 0提问于2020-03-13得票数 0

1回答

R中的Websraping

我正在尝试通过网络将新闻数据收集到R中。我正在尝试搜索我下载的html，以便在每行/每行中找到关键字。因此，如果页面中的某一行以"“开头，我想要该行/行的编号，然后将该行和行隔开。library(rvest)grep("</div",googlenews) **Error in as.vector

浏览 0提问于2015-12-16得票数 0

1回答

当试图收集产品价格信息时，rvest* web scraping返回一个空的数据帧。*

html、r、xml、web-scraping、rvest

我正在尝试使用'rvest‘从：中提取产品价格。我使用以下代码：library(tidyverse) url <- "https://www.lowes.com/pl/Lawn-garden-hand-tools-Outdoor-tools-equipment-OutdoorsgoToProdList=true&int_cmp=LawnGardenHandTools:C:Outdoors:Merch:shop_all

浏览 7提问于2020-06-18得票数 2

回答已采纳

1回答

网络-在课堂上在某个单词之后刮起。

html、css、r、web-scraping

我试图用以下变量将网页上的信息抓取到数据框架中：“名称”很容易被刮掉，因为它有一个特殊的类“结果标题html源的结构合理，可用于web抓取。library (xml2) library (

浏览 3提问于2022-01-30得票数 0

回答已采纳

1回答

如何从值中过滤特定的单词

r、web-scraping

我想过滤掉x中包含单词“印度”的值。 webpage <- getURL("https://www.sec.gov/Archives/edgar/data/789019/000156459019027952/msft-10k_20190630.htm")pagetree <- htmlTreeParse(webpage, error=function(...){}, useInternalNodes = TRUE) # par

浏览 18提问于2019-09-22得票数 1

回答已采纳

1回答

在R中使用`read_html`时缺少元素

html、r、web-scraping、rvest

我正在尝试使用rvest包中的read_html函数，但遇到了一个我正在努力解决的问题。例如，如果我试图读取出现在页面上的底部表格，我将使用以下代码：html_content <- read_html("https://projects.fivethirtyeight.com/2016-election-forecast/washington/#now") 通过检

浏览 17提问于2016-08-31得票数 3

回答已采纳

1回答

R:使用rvest从FIFA抓取表时出现的问题

r、web-scraping、dplyr、rvest

我试图从过去30年中至少参加过一次世界杯的每一支球队中收集数据。library(rvest)fifadata <- read_html("http://www.fifa.com/fifa-tournaments/teams/association=BRA/index.<em

浏览 1提问于2017-11-22得票数 0

1回答

从404错误抓取URL中的数据-抓取

r、web-scraping、rvest

我试图从一个网页上抓取数据，但我得到了一个404错误的网址如下。但是，我需要从浏览器中获取404链接中的数据。示例如下：library(rvest) read_

浏览 3提问于2018-05-28得票数 0

点击加载更多