我在试着抓取：当我在浏览器控制台中尝试Xpath时：> "200 mg"
但当我在scrapy中尝试同样
浏览 13提问于2019-11-28得票数 0
在浏览器控制台中工作，但在JavascriptExecutor中不起作用。如果索引值为"1"，则它在JavascriptExecutor中工作；但任何高于该值的值都不能工作(例如"2“、"3”、"4“、"5”等)。在浏览器控制台中，这些操作都很好。所以我的问题是，“为什么这个明显在浏览器控制</e
浏览 0提问于2018-12-13得票数 0
回答已采纳
1回答
刮除Xpath输出为空
、、、
我想在这个网站上提取数据：，我正在学习python，以及如何使用Scrapy，我的问题是:为什么我不能用Xpath检索数据？当我在浏览器中测试Xpath时，我的xpath看起来很好，它会返回正确的值。(谷歌Chrome)from scrapy import Spider
from stack.items
浏览 2提问于2016-06-28得票数 3
回答已采纳
1回答
我试图从这个表中抓取一些数据：，但是在尝试从Value列提取信息时遇到了一个问题。我使用了Mozilla dev工具来获得XPath选择器，这些选择器在名称和总体评级方面运行良好，但在值的情况下，使用浏览器生成的XPath只返回一个空列表。我在用Scrapy。In [85]: value = response.xpath('/html/body
浏览 2提问于2020-08-02得票数 0
回答已采纳
我正在努力学习如何使用Scrapy抓取网页内容，并遇到了一个我无法理解的问题。我不明白为什么会发生这种情况；我可以使用任何浏览器的dev工具来选择DOM元素，但是当我试图从Scrapy中选择相同的元素时，会返回一个空列表。在这里，您可以看到这个xpath //*[@class='lSPager lSGallery']/li/a/img[@src]在浏览器中运行<em
浏览 5提问于2020-05-05得票数 0
1回答
我以前写过垃圾代码，它可以正常工作，但是在这个特殊的1中，我的逻辑不能工作，请帮助我：import scrapy
links=scrapy.Field() title=scrapy.Field()
我的first.py('title','/&
浏览 0提问于2016-11-03得票数 0
2回答
我有自动测试脚本，它们在Chrome.Now上运行良好，扩展了对边缘和IE11的支持。边缘浏览器上的测试脚本很少失败。相同的定位器在镀铬中工作得很好，但在边缘却不能工作。我们有任何方法来识别xpath和css，比如Edge浏览器中的chrome吗？
我只想验证xpath是否与Chrome和edge浏览器中的相同元素匹配。我们是否有任何方法在边缘<
浏览 0提问于2018-07-11得票数 0
我按照Scrapy官方网站上的dmoz教程来抓取Python书籍和资源的标题、链接和描述。在本教程中，我使用了完全相同的蜘蛛，内容如下：from tutorial.items import DmozItem
i
浏览 3提问于2015-10-07得票数 1
回答已采纳
我对Scrapy还很陌生，但我正在设计一个网络抓取工具来从GoFundMe中提取某些信息，特别是在这种情况下，有多少人为一个项目捐款。我已经写了一个xpath语句，它在Chrome中运行良好，但在Scrapy中返回null。//h2[@class=&quo
浏览 11提问于2020-02-13得票数 0
我正试图在每一份盈利报告中分析表(资产负债表)中的一些数据。这里我以AMD为例，但不限于AMD。我现在的问题是，我无法读到任何东西--我的蜘蛛总是返回空的结果。我使用scrapy shell "http://example.com"测试我的xpath，我直接从Google检查器复制它，但它仍然没有工作。这里是我的xpath (提供了Chrome浏览器)：
//*[@id="newsroom-c
浏览 0提问于2016-09-27得票数 1
回答已采纳
1回答
def parse(self, response): hxs = Selector(response)但是print links显示了一个空输出：[]
我想知道我使用的xpath有什么问题吗？
浏览 2提问于2014-02-18得票数 0
回答已采纳
"，第102行，在iter_errback中文件"c:\python27\lib\site-packages\scrapy-1.3.1-py2.7.egg\scrapy\spidermiddlewares\offsite.py"，第29行，在process_spider_output中文件"c:\python27\lib\site-packages\scrapy
浏览 2提问于2017-02-15得票数 0
我最近开始用Scrapy学习web抓取，作为练习，我决定从this url抓取一个天气数据表。 通过检查页面的XPath元素，我将其表复制到我的代码中，但在运行代码时只得到一个空列表。我尝试使用以下代码检查HTML中存在哪些表： from scrapy import Selectorimport pandas as pd
url = 'https:('//table') 它只返
浏览 122提问于2020-09-06得票数 0
回答已采纳
过去一周，我一直在使用以下教程处理python和scrapy：
本教程所做的是，它使用刮取web爬虫在堆栈溢出上抓取顶部的问题及其urls，然后将其存储到mongoDB数据库和集合中。我已经找到了其中的大部分操作方法，但是我遇到了“xpath”的问题，它是scrapy用来搜索网页上指定项的工具，更具体的是，我已经想出了如何对mongodb和存储多个集合执行pipleline操作，以及根据正在刮取的项的名称更改集合名，但我无法让“蜘蛛”专门工作于xpath</em
浏览 3提问于2018-10-10得票数 1
回答已采纳
您好，我可以在网络控制台中使用$x('//pinput')捕获元素，但在python中使用selenium时： inputs = self.driver.find_elements_by_xpath(EDIT1： 我在浏览器的控制台中得到了这个： ? 在我的代码中，我有： inputs = self.driver.find_elements_by_<em
浏览 15提问于2020-04-22得票数 0
我在谷歌上搜索过，也在堆栈溢出上看到了问题，但没有任何效果。运行良好，但是response.selector和response.xpath()错误地表示响应对象不存在这样的属性。我也无法导入Selector，因为在scrapy目录层次结构中没有Selector (不知道为什么)from scrapy.selectorallowed_domai
浏览 2提问于2014-08-14得票数 1
回答已采纳
2回答
但当使用scrapy并通过response.xpath('//div[@class="r"]/a/@href'访问时)，这将返回空。许多其他的Xpath，比如链接标题，结果也是空的。奇怪的是，我在使用response.xpath('//cite').get()时能够得到一些东西，它基本上是href，但不完整。如果我使用response.body，我可以看到我想要的hre
浏览 15提问于2019-03-16得票数 0
回答已采纳
我有一个用命令scrapy crawl mynamefile启动的python脚本。我想从我的node js应用程序的js文件中运行python cli命令scrapy crawl，然后在控制台中显示它。 问题是我不知道如何在节点中导入scrapy python库。 谢谢你的帮忙!
浏览 24提问于2019-03-07得票数 0
1回答
无论我尝试了第一步创建了这个xpath表单Mozilla
sel.xpath('/html/body/form/div[3]/div/div[3]/div[2]/div/div[3]/div[/tbody/tr[
浏览 1提问于2016-10-31得票数 0
回答已采纳
我正在尝试抓取这个网址"“//a[@class="product_img_link"]//@href
当我使用Scrapy Shell时，它返回122行，在浏览器中，它返回135我使用response.body检查html，并将其保存到HTML文件中，然后在浏览器中打开该文件，然后运行
浏览 2提问于2014-06-07得票数 1
云服务器
ICP备案
云直播
对象存储
实时音视频
腾讯云开发者
