网页抓取网址中的Google-Sheets - xpath特定号码
基础概念
网页抓取（Web Scraping）是指从网页中提取数据的过程。Google Sheets 是一个在线表格工具，可以用来存储和管理数据。XPath 是一种在 XML 和 HTML 文档中查找信息的语言。
相关优势
- 数据自动化：通过网页抓取，可以自动化地从网页中提取数据，减少人工操作。
- 数据整合：抓取的数据可以整合到 Google Sheets 中，便于进一步分析和处理。
- 灵活性：XPath 提供了灵活的方式来定位和提取网页中的特定数据。
类型
- 静态网页抓取：抓取内容不随时间变化的网页。
- 动态网页抓取：抓取内容随时间变化的网页，通常需要模拟浏览器行为。
应用场景
- 市场分析：从电商网站抓取商品信息，进行分析。
- 数据收集：从新闻网站抓取文章标题和内容。
- 学术研究：从科研网站抓取论文引用和数据。
遇到的问题及解决方法
问题：无法通过 XPath 提取特定号码
原因：
- XPath 表达式错误：XPath 表达式可能不正确，导致无法匹配到目标元素。
- 网页结构变化：网页的结构可能发生了变化，导致原有的 XPath 表达式失效。
- 动态内容加载：网页内容可能是通过 JavaScript 动态加载的，直接抓取可能无法获取到完整内容。
解决方法：
- 检查 XPath 表达式： 确保 XPath 表达式正确无误。可以使用浏览器的开发者工具（如 Chrome 的 DevTools）来验证 XPath 表达式。
- 检查 XPath 表达式： 确保 XPath 表达式正确无误。可以使用浏览器的开发者工具（如 Chrome 的 DevTools）来验证 XPath 表达式。
- 处理动态内容： 如果网页内容是动态加载的，可以使用 Selenium 等工具模拟浏览器行为。
- 处理动态内容： 如果网页内容是动态加载的，可以使用 Selenium 等工具模拟浏览器行为。
- 定期更新 XPath 表达式： 如果网页结构经常变化，可以定期检查和更新 XPath 表达式。
参考链接
通过以上方法，可以有效地解决网页抓取中遇到的 XPath 提取特定号码的问题。
相关·内容
2回答
我正在尝试理解如何用PHP & Curl从黄页网站中抓取解码后的电话号码。
下面是一个示例网址：
通常，从技术上讲，你可以这样做：
$ch = curl_init();
$page = curl_exec($ch);
if(preg_match('#example html code (.*) example html code#', $page, $match))
$result = $match[1];
echo $result;
但是在上面提到的页面上，你不能直接在HTML代码中找到电话号码。一定有办法弄到电话号码的。
你能帮帮我吗？
诚挚的问候
浏览 0提问于2017-04-26得票数 1
1回答
对于我的一个网络项目，我需要从不同的网站来源刮数据。为了简单起见，我用一个例子来解释。
让我说，我想刮一下他们的制造商网站上列出的手机的数据。
。。
我有一大串网址。每个品牌的网页都有自己的HTML表示方式供浏览器使用。
我怎样才能写一个规范化的脚本来遍历那些列出的网页URL的HTML和刮取数据，不管它们的格式是什么？
或者，我需要编写一个脚本来从每个模式中抓取数据吗？
浏览 7提问于2014-11-18得票数 3
回答已采纳
我想要抓取以下新闻的参与人数。网址是，我想要的号码是820。它是由javascript生成的。我怎么才能用简单的方法得到那个数字呢？
浏览 1提问于2013-07-14得票数 0
回答已采纳
我使用SimpleHTMLDOM从其他网页抓取东西，但我有一个问题，如何才能在图像ancor标记内获得urls，因为该网页包含链接锚标记以及图像锚标记！但是我只想在图片锚标签的边上得到href的值！
<a href="I DO NOT NEED THIS VALUE"><a/>
<a href="I NEED THIS VALUE"><img src="xxxx"><a/>
但是当调用DOM时，它会返回所有的href URL，包括链接锚URL！我只需要在图像锚标签内的网址！
我使用这
浏览 0提问于2012-05-06得票数 0
回答已采纳
1回答
我想爬这个网站：
我的目标是编写一个python脚本，在输入收件号码后，当这个网页上的状态发生变化时，它就会通知我。
我以前从来没有这样做过，但在这里读了一些:一些推荐urllib2，另一些推荐scrapy。我对此有一个非常基本的理解。
但我的问题是：
当我输入收据号码时，网页的网址在提交后不会更改。查看源页面，我看到您需要在哪里输入收据号码：
<input id="receipt_number" name="appReceiptNum" class="form-control textbox initial-focus" maxleng
浏览 2提问于2015-08-20得票数 0
回答已采纳
1回答
使用Nutch，我想抓取所有的网页，其中有ipod在他们的网址。
例如，如果我在他们的搜索框中搜索ipod，我会得到
这个网页显示了一堆ipod的链接。我想抓取每个与ipod相关的链接并获取它。
搜索结果下显示的第一个链接是
我应该使用下面的吗？
+^http://([a-z0-9\-A-Z]*\.)*www.amazon.com/*ipod*
浏览 1提问于2011-10-29得票数 2
3回答
我正试图从Tripadvisor.com网页中抓取/提取公司/酒店的网站。当我检查网页时，我没有看到网站网址。知道如何使用python提取网站url吗？提前道歉，因为我最近才开始“在Python.‘网上刮擦”。谢谢。
请看到图像中的两个红色箭头。当我选择网站链接时，它会将我带到'‘--这就是我想使用Python提取的内容。
浏览 4提问于2018-02-01得票数 7
回答已采纳
1回答
我正在尝试学习如何抓取/抓取网络，需要一些帮助。我目前正在从以下网站上抓取网页：。然而，我有困难的网络刮这个网站上的价格，评级和覆盖网址。有人能帮我吗？下面列出了我尝试使用的代码。
在文章中查看(“//data.xpath@class=‘product_pod’”)：
title = i.xpath("h3/a/@title")
price = i.xpath("//p[@class='price_color']/text()")
rating= i.xpath("//p[@class='star-rating']/@cl
浏览 17提问于2020-03-06得票数 0
我正在编写一次密码(OTP)来验证手机号码的脚本。当OTP弹出窗口打开时，我无法在文本字段中赋值，系统显示错误：
org.openqa.selenium.NoSuchElementException:无法定位元素：{“方法”：“类名”，“选择器”：“opt_success”}命令持续时间或超时:30.04秒“
下面是我起草的代码。
driver.findElement(By.id("phone")).sendKeys(Constants.MOBILE_NUMBER);
driver.findElement(By.id("btn_verify
浏览 4提问于2016-04-23得票数 0
回答已采纳
1回答
我已经创建了一个使用scrapy.The爬虫爬虫的网站和抓取链接。**所使用的技术：**Python，Scrapy Error抓取相对urls，因为刮刀器无法抓取网页。我要爬虫只取无源网址。救命啊！！
import scrapy
import os
class MySpider(scrapy.Spider):
name = 'feed_exporter_test'
# this is equivalent to what you would set in settings.py file
custom_settings = {
浏览 2提问于2021-06-29得票数 1
1回答
我正在使用python抓取网页，这对静态内容非常有用。我试图从页面中抓取一个url，但结果是，它是通过javascript调用返回的。为此，我使用selenium，但无法弄清楚如何实现它。
如果您单击给定链接上的“大小图表”，就会看到一个弹出式打开，其中提到了尺寸指南。我怎样才能在我的程序中得到这个指南的网址？
我也面临着一个类似的问题，在以及获得尺寸指南。如果有人能指点这些链接，我会非常感激的。
浏览 2提问于2015-05-27得票数 0
回答已采纳
我正在尝试编写自己的Nutch插件来抓取网页。问题是，我需要识别是否有一些特殊的标签，例如在网页上。在官方文档中有一些说明，使用Document.getElementsByTagName("foo")可以做到这一点，但这对我不起作用。你有什么想法吗？
我的第二个问题是，如果我识别了上面的标签，我想从这个网页上获得一些其他标签，其中标签被识别…有没有办法存储某个时刻被抓取的网页的完整源代码？
谢谢，简。
浏览 2提问于2013-03-30得票数 1
回答已采纳
我正在网络上抓取以下网址：
页面的最右边有一个右滚动按钮，但是当检查它的源代码时，我没有发现任何链接或javascript点击与该按钮相关联。以下是我的问题：
如果没有javascript或链接，是什么控制了单击右滚动按钮的行为？或者按钮上是否有我不知道的事件侦听器(非常初级的javascript知识)
如果我想抓取页面，我可以通过模拟selenium中的单击(如"button.click()“)向右滚动。但是，我发现这很容易出错。例如，总是有带有Chrome的ClickInterceptedException。有没有更好的方法来抓取网页右边的内容？
浏览 2提问于2019-06-20得票数 0
我正在尝试使用selenium从网页中抓取一些数据。我已经成功地让selenium在树莓派上无头工作，我可以连接到我试图抓取的网页，返回页面的标题，并返回我连接到的URL。
我一直在看教程中关于如何抓取数据的示例，它们都是这样的：
titles_element = browser.find_elements_by_xpath(“//a[@class=’text-bold’]”)
然而，我试图抓取的网页中的每一块数据都有相同的类名。举一个我试图抓取的第一位数据的例子，我试图得到wins的值是4：
第二个示例是im尝试抓取的数据，在本例中为kill，值为559：
我试图抓取的两个数字共享相同的
浏览 5提问于2021-03-16得票数 0
我正在试图捕捉HTTP POST的网页钩子发送。我在Azure中做了一个测试服务器，它的网址是http://whtestingserver.cloudapp.net。
这就是我所困惑的。1.当我设置web钩子时，它要求我输入URL。这个URL是指我的服务器URL吗？那我能把http://whtestingserver.cloudapp.net
我怎样才能抓取网络钩子发送的HTTP POST？我需要制作一个网页来抓取它吗？
谢谢。
浏览 1提问于2015-03-23得票数 0
回答已采纳
2回答
可能重复：
在你的意见/经验，最好的方法是什么，当抓取网页的具体信息？
我正在构建一个系统(PHP/JS/MySQL)，它将自动从指定的网页中删除特定的信息字段。该系统需要一种功能，在您(半)手动在该网站上抓取第一页后，逻辑将转到db，并用于在网站上以该格式刮取任何其他页面。
我能够快速地找到和保存HTML (标记名称+类+ id)和XPath，并添加一些筛选规则(比如干净的HTML，在第一个标记处中断，删除特定的单词.)
我的问题(再一次：)是:在这个自动化中使用什么最好的方法能够正确地刮掉页面？
例如：
简单HTML：
XPath：
雷吉斯..。
欢迎任何其他建议。
更新
浏览 3提问于2012-03-01得票数 0
我在ASP.NET中使用HtmlAgilityPack抓取HTML DOM元素，目前我的代码加载了所有的href链接，这意味着子链接也是子链接。但我只需要我的域名网址依赖的网址。我不知道如何为它写代码。有人能帮我做这件事吗？下面是我的代码：
public void GetURL(string strGetURL)
{
var getHtmlSource = new HtmlWeb();
var document = new HtmlDocument();
try
{
document = getHtmlSource.Load(strGetURL);
var a
浏览 1提问于2014-09-18得票数 0
1回答
函数无法获得空的td元素。
、、、、
我对网络抓取是非常非常新的，而且我还在学习。目前，我正在使用Python和Scrapy来构建我自己的web刮板，但是我遇到了一些非常奇怪的事情。
我试着在这里刮一下这个网页，就像一个练习：
这基本上是一个网页，列出了世界各国的债务占GDP的比率。现在，如果您注意到，没有在该网页的表格中记录任何人口号码。
我试图使用这个xpath表达式从该网页中提取每个国家的人口：
import scrapy
import pandas as pd
class GdpDebtSpider(scrapy.Spider):
name = 'gdp_debt'
allow
浏览 3提问于2020-10-27得票数 0
回答已采纳
2回答
我正在抓取一些网页的一些特定部分的网页。我使用php，curl和xpath来获取页面的一部分。但是人们建议我应该使用XHTML文档的namespaces才能使XPATHs工作。据我所知，namespaces是用来避免各种元素名称之间的冲突的，那么在这种情况下我为什么需要namespaces呢？实际上，我正在使用Tidy将网页转换为XHTML。我真的需要名称空间吗?如果需要，在哪种情况下需要，因为在从wikipedia中抓取内容时，相同的代码without namespaces工作得很好。此外，即使在修改我的php代码以包含namespaces之后，该代码也不适用于某些urls。你可以看看这个。
浏览 0提问于2011-05-31得票数 0
回答已采纳
我有一个网页网址列表需要抓取。是否有可能只抓取网页列表，而不是深入抓取它。如果我添加的url作为种子，它抓取完整的网站与完整的深度。
浏览 4提问于2012-08-10得票数 1
回答已采纳
如何在H1上使用XPath获取号码？只抓取号码(一章后)
<header>
<h1>Example Chapter 01</h1>
<span class="epx">Kamis, 08 Sep 2022, in <i class="fas fa-book-open"></i> <a href="/manga/isekai-de-onnanoko-no-onaneta/" title="Example"> Example</a><
浏览 8提问于2022-09-11得票数 0
我有一个问题，获得一个特定的URL响应使用我需要的网页抓取。我已经能够让所有其他网址工作，除了这个。我的代码：
import requests
u = "https://jobs.utc.com"
r = requests.get(u)
r
我收到的错误是：
SSLError: ("bad handshake: SysCallError(-1, 'Unexpected EOF')",)
为什么这个URL会给我带来麻烦？
浏览 3提问于2017-11-09得票数 0
回答已采纳
1回答
多年来，我一直使用.NET和ShDocVw从网页上抓取数据，没有遇到任何我无法克服的问题。不过，这个网站让我打了一顿。从图书馆搜索页面上抓取书目和其他信息看起来很容易，但我看不到能够抓取的数据。通常，我只是在DOM中查找，但数据并不在那里。我做了一个视图源，但是数据不在那里。我真的很困惑。
我现在正在学习安卓，这就是我想要解决我的问题的方式，但如果.NET会更容易的话……现在我会接受任何形式的帮助。
网址为
浏览 3提问于2010-12-09得票数 1
1回答
我试图刮一个网页，其中有人和他们的信息(电话，姓名，位置，电子邮件等)。有些人丢失了一个电话号码或电子邮件，我在这方面有困难，因为我把列表组合在一起，如果它不刮字符串，索引就会不同。
这就是我如何抓取电子邮件：
response.xpath('//ul//div[@class="contact-text contact-email ctaType-email"]/a/@title').extract()
我收到了来自HTML代码的电子邮件：
<div class="contact-text contact-email ctaType-email&#
浏览 4提问于2017-01-18得票数 0
回答已采纳
3回答
PHP抓取页面
、、、
我正在尝试抓取一个页面，其中包含我要查找的信息：
<tr class="defRowEven">
<td align="right">label</td>
<td>info</td>
</tr>
我在试着把标签和信息从页面上拿出来。在我做类似这样的事情之前：
$hrefs = $xpath->evaluate("/html/body//a");
这就是我抓取网址的方法，有没有办法抓取tr信息呢？使用正则表达式还是使用DOMXPath更好？我对DOMXPa
浏览 3提问于2009-09-03得票数 1
回答已采纳
1回答
抓取HTML文件
、、
我正在尝试从网页中抓取一个日期，它对应于最新的上传日期。html文件如下所示：
<!DOCTYPE HTML >
<html>
<head>
<title>some_text_here</title>
</head>
<body>
<pre>
<img src=".." alt=".." ..> <a href="some_link"> 27-May-2015 02:13 25K
<img src="
浏览 1提问于2015-06-01得票数 0
3回答
没有从网页上获得所有链接
、、、
我正在做一个网络抓取项目。我正在抓取的网站的网址是
我是刮所有的产品在这个网页上列出的链接。我尝试使用请求-HTML和Selenium获得链接。但我得到了57个和24个链接。而页面上则列出了150多个产品。下面是我正在使用的代码块。
使用Selenium的：
from selenium import webdriver
from selenium.webdriver.chrome.options import Options
from time import sleep
options = Options()
options.add_argument("user-agent = Mo
浏览 3提问于2021-01-30得票数 0
回答已采纳
4回答
我正在尝试抓取一个网页，我想抓取div标记内的文本和所有HTML标记。
该网页如下所示：
<div class="class">
<p>A little paragraph</p>
<a href="#"><img src="/test.jpg"/></a>
<p>Another paragraph</p>
<ul>
<li>1</li>
<li>2</li>
浏览 3提问于2015-05-10得票数 1
目前，我正试图在整个网页中获取一些文本数据。一开始，我抓取所有的网页，然后慢慢地在网页中筛选，从每一页抓取我需要的数据。例如，由于动态ID的原因，我在抓取诸如平方英尺或邻居之类的项目时遇到了困难。我通过XPath或CSS选择器看到的许多例子都涉及到搜索文本，但在我试图抓取的每一页上都会发生变化。有什么办法能捕捉到这片土地或社区吗？
from bs4 import BeautifulSoup
from selenium import webdriver as wd
from selenium.common.exceptions import StaleElementReferenceExcep
浏览 3提问于2019-02-05得票数 0
1回答
我正在寻找关于如何在XPath平台上使用iOS的信息。在苹果文档中，我发现了关于XPath 的信息，XPath只能在macOS上使用。
我的目标是通过XPath抓取网页，但是我找不到任何有关这方面的信息，而不是XPath，我使用HTMLKit。
有没有一种使用XPath脚本在iOS平台上抓取网页的方法？
浏览 2提问于2021-04-22得票数 2
回答已采纳
1回答
如何从新的选项卡项中抓取数据
、、、、
我试着用selenium爬行这个网页的产品的细节。
因为我想抓取每个产品的详细信息，所以我从页面中抓取了产品的所有网址。然后，我使用回调方法将其解析为另一个def，以爬行该url的所有信息。
但是我尝试了很多解决方案，但是我的输出总是没有显示任何东西。
这是我的密码
import scrapy
import selenium
from scrapy_selenium import SeleniumRequest
from selenium.webdriver.common.keys import Keys
class Goonet1Spider(scrapy.Spider):
na
浏览 14提问于2022-05-24得票数 -1
1回答
我无法从网站上抓取数据我有一个网址链接https://autodesk.wd1.myworkdayjobs.com/Ext/0/refreshFacet/318c8bb6f553100021d223d9780d30be当我打开这个链接时，有很多工作列表显示当我滚动页面时它自动加载更多的工作列表当我检查页面时只有JavaScript显示，我需要提取以下数据工作位置，工作描述，工作网址，全职或兼职，json格式的最低资格我不知道如何做下面我的代码 from bs4 import BeautifulSoup
import pandas as pd
from selenium import webd
浏览 12提问于2020-10-29得票数 0
如何使用google sheets从下面的网页中抓取linkedin urls https://investors.atlassian.com/corporate-governance/board-of-directors/default.aspx# 我尝试在google sheets上使用=IMPORTXML，但它只抓取缩略图，而不是连接到缩略图的URL 谢谢
浏览 16提问于2021-03-19得票数 0
我试图在网络上刮除各种网页的结果。第一页运行良好，但当我切换到下一页时，不幸的是，它只是再次对结果的第一页进行了网页抓取。结果不会返回一个新的URL，所以这样不工作，而是它的窗口之上的网址打开的网页。我似乎也想不出如何添加第一页的结果来添加第二页，它们作为单独的列表出现。下面是我的代码。
from selenium import webdriver
import time
import requests
from bs4 import BeautifulSoup
from selenium.webdriver.common.keys import Keys
#original webscra
浏览 10提问于2022-05-22得票数 0
1回答
我正在尝试从这个网站抓取代理机构的电话号码：
列表视图
详细信息视图
电话号码隐藏在详细信息页面中。
那么，有没有可能通过像上面的详细视图url和抓取电话号码这样的url浏览网站呢？
我在这段代码中的尝试是：
from scrapy.item import Item, Field
class AgencyItem(Item):
Phone = Field()
from scrapy.contrib.spiders import CrawlSpider, Rule
from scrapy.contrib.linkextractors.sgml import SgmlLinkExtra
浏览 0提问于2013-04-24得票数 2
1回答
我正在使用烧瓶和抓取刮从网站的结果。在这里，烧瓶网页是能够获取输入URL被刮，然后开始爬行。在此之前，一切都很好。
现在，我想让这个Flask网页以HTML标签(它包含一些要被抓取的项目的信息)作为输入，并且基于输入标签的结果应该被抓取。
简单地说，用户可以决定哪些项目应该报废，即项目应该被选择dynamically.Provide我有一些想法，我如何传递这些标签来设置在项目类别中要刮的项目？
浏览 1提问于2015-08-18得票数 0
回答已采纳
我已经创建了一个刮刀，从一个网页抓取特定的元素。该网站提供了进入所有的artists在网页上的选择，所以我可以直接从这个页面获得所有的artists，因为没有‘下一页’的网站提供的href。我的问题是，当我将所有网站加载到请求中时，它不会爬行，但是当我减少网页列表时，它将开始抓取页面。对于是什么引起这个问题，有什么想法吗？
此外，我想抓取所有的歌词从歌曲页。然而，一些歌词是间隔在a标签，而另一些是一个单一的字符串。然而，有时我没有得到歌词，即使我点击直接网址网页有歌词。我怎样才能抓住所有的文字，而不管得到所有歌曲的歌词？如果我包括以下内容：
.//pre[@id='lyric-body
浏览 6提问于2022-01-23得票数 0
回答已采纳
我有一个网址的具体位置，在这个网址显示网页从谷歌地图API这个网页有位置，电话号码，网站等图片(请查看附件)。我需要在特定的事件中显示它，比如(onclickListener)。
*网址：
@Override
public void onClick(View v) {
switch (v.getId()) {
case R.id.b1:
// First Location
break;
case R.id.b2:
// second Location
break;
}
}
浏览 4提问于2016-12-17得票数 0
回答已采纳
1回答
我正在使用Apache Nutch来抓取网页。当我搜索特定的名字时，我想抓取网页，例如，如果我搜索比尔盖茨，我想获得该搜索结果的结果链接。我有像这样的网址
www.mysite.com/search?name=bill+gates
但在爬行时，它不再显示要获取的url。实际上，它不会获取任何结果。
有没有抓取该页面的选项？我在regex-urlfilter.txt中添加了接受所有内容的代码。我该如何抓取链接？提前谢谢。
浏览 1提问于2013-05-23得票数 0
回答已采纳
我是Python和Web抓取新手，所以请容忍我。我一直试图建立一个网页刮取工具来打开一个网页，登录，并检索一个特定的价值。到目前为止，我已经能够打开网页和登录。但是，我根本找不到检索(打印)所需值的方法。这就是我当前代码的样子：
from selenium import webdriver
from bs4 import BeautifulSoup
driver = webdriver.Chrome(executable_path=r'C:/Users/User/Downloads/chromedriver.exe')
url = "xxxxxxxx"
dr
浏览 0提问于2019-03-19得票数 2
回答已采纳
我正在尝试使用Python3库从AirBnb的城市页面中提取列表的urls。我熟悉如何使用Beautifulsoup和requests库来抓取更简单的网站。
网址：'‘
如果我检查页面上链接的元素(在Chrome中)，我会得到：
xpath: "//*[@id="listing-9770909"]/div[2]/a"
selector: "listing-9770909 > div._v72lrv > a"
我的尝试：
import requests
from bs4 import BeautifulSoup
url =
浏览 16提问于2018-08-31得票数 0
我正在尝试用scrapy和xpath从python的网页中抓取一些链接，但是我想抓取的元素是介于：：they和::after之间的，所以xpath看不到它们，因为它们不存在于HTML中，而是用javascript动态创建的。有没有办法去掉这些元素呢？
::before
<div class="well-white">...</div>
<div class="well-white">...</div>
<div class="well-white">...</div>
::a
浏览 2提问于2018-09-12得票数 2
1回答
我正在尝试使用requests模块从webpage中抓取电话号码。我已经成功地使用了selenium，但我希望使用requests模块也能实现同样的效果。我使用chrome dev工具观察netwrok活动，试图找到任何线索，但都失败了。如果您想知道我是如何使用selenium做到这一点的，我想粘贴selenium脚本。 from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from s
浏览 28提问于2021-06-16得票数 1
1回答
ImportXML :我正在尝试抓取。我需要以下字段-酒店名称，网址，地址，城市，密码，评论(只是数字)为每个酒店，百分比和便利设施。我想在一家酒店里把这一切都排成一行。有人能帮帮我吗。
谷歌文档链接：
我无法在GoogleDoc中获得上述所有要求。我被困在URL旁边的地址抓取中。
浏览 0提问于2014-08-10得票数 1
我遇到了一个有点复杂的XPath问题。考虑一下这个网页的一部分的HTML (我使用了Imgur并替换了一些文本)：
<a href="//i.imgur.com/ahreflink.jpg" class="zoom">
<img class="post-image-placeholder" src="//i.imgur.com/imgsrclink.jpg">
</img>
</a>
首先，我想搜索文档中的所有img标记，并找到它们对应的srces。接下来，我想检查i
浏览 1提问于2016-06-24得票数 5
回答已采纳
3回答
我正在尝试使用rvest包从网页中抓取数据。在一个简单的格式中，html代码看起来像这样：
<div class="style">
<input id="a" value="123">
<input id="b">
</div>
我想从第一个输入中获得值123。我尝试了下面的R代码：
library(rvest)
url<-"xxx"
output<-html_nodes(url, ".style input")
这将返回一个输
浏览 0提问于2015-08-21得票数 20
2回答
我刚接触Scrapy，正在尝试爬网，但HTML元素由许多DIV组成，其中有重复的类名，例如。 <section class= "pi-item pi-smart-group pi-border-color">
<section class="pi-smart-group-head">
<h3 class = "pi-smart-data-label pi-data-label pi-secondary-font pi-item-spacing">
</section>
<
浏览 27提问于2020-08-30得票数 1
回答已采纳
我想在UIWebView中打开一个网址，我可以打开网址，但它显示得很大，就像参考资料：
我想打开网址捕获完整的视图，或者我们可以说，网址的所有内容将是可见的一次，用户可以抓取( ZoomIn和ZoomOut，如UIScrollView)的网页。我该如何实现这一点。谢谢。
我想在WebView中像这样显示网址。
浏览 1提问于2011-06-15得票数 0
1回答
我想从一个动态网页中抓取一些内容(它似乎是在MVC中开发的)。
数据抓取逻辑是用超文本标记语言的敏捷性完成的，但现在的问题是，从浏览器请求网址时返回的超文本标记语言和从ASP.NET网页请求的网址的网页响应是不同的。
浏览器响应主要包含我需要的动态数据(根据查询字符串中传递的值呈现)，但WebResponse结果不同。
你能帮我获取动态网页查看WebRequest的实际内容吗？
下面是我读过的代码：
WebRequest request = WebRequest.Create(sURL);
request.Method = "Get";
//Get the response
W
浏览 3提问于2014-09-24得票数 7
1回答
我正在尝试从URL中抓取地理数据，以供我的抓取练习。但是我在处理脚本标签的内容时遇到了麻烦。
以下是脚本标记的内容：
<script type="application/ld+json">
{
"address": {
"@type": "PostalAddress",
"streetAddress": "5080 Riverside Drive",
"addressLocality"
浏览 1提问于2018-03-16得票数 1
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
实时音视频
对象存储
云直播活动推荐
腾讯云开发者
