你好，我有一个使用Python和Selenium的脚本，我不明白为什么这不能检索网站的JS部分(同样的脚本在我的另一台机器上运行得很好)： chrome_options.add_argument("--no-sandbox")
chrome_options.add_argument("--enable-javascript</em
浏览 4提问于2021-06-04得票数 0
回答已采纳
1回答
python刮刀，响应[403]
、、、、
我正在尝试在上刮一个网站，但我得到了以下错误：<body style="margin:0"><p id="cmsg">Please我使用的代码：import requestsimport requests_cache
浏览 4提问于2021-06-07得票数 2
我听说可以在启动webdriver时加载一个自定义的Firefox配置文件，但我还没有找到这样做的方法。Python绑定文档没有很清楚地说明这一点。我需要在没有JS的情况下启动Firefox，因为我正在测试的网站有很多由Google注入的广告，其中一些加载非常慢，这使得测试也很慢，因为它需要等待所有页面对象完成加载。
浏览 0提问于2011-12-23得票数 1
我正在尝试抓取以下网页： (我已从网站获得许可)from selenium import webdriver
浏览 0提问于2020-12-06得票数 0
因此，荷兰每年都会举行一项名为"Top2000“的广播活动，人们可以投票选出他们最喜欢的艺术家和歌曲。我觉得分析一下音乐和艺术家的喜好会很酷。为此，我需要朗读投票列表上的艺术家/歌曲，这些列表是通过网址与我共享的，例如 one。urlread(url);system( command );
但它们输出的都是HTML元
浏览 2提问于2018-12-03得票数 0
1回答
我想抓取一个网站的“原始”JavaScript代码。例如，如果我要抓取this网站。我会得到一个包含以下内容的字符串： ? 这只是给定链接中现有JS的一小部分，但我希望获得字符串或字符串数组中的整个JS。 我尝试了不同的方法来获取这些数据:使用requests和selenium。简单地加载网站的HTML似乎不起作用，因为脚本标记似乎
浏览 19提问于2020-01-20得票数 1
1回答
我试图做一些网页抓取，但是当我下载url的html时，图片是隐藏的，但在我的浏览器中，它们不是"user-ad-row__image image--is- hidden“，而是”user-ad-row
浏览 18提问于2019-09-18得票数 0
1回答
BeautifulSoup(data) print href
现在，我得到了一个链接列表，但由于某种原因，我没有得到tbody中的重要链接。我也尝试过使用ElementTree，但是在读取链接时出现了一个错误，因为它使用了一些无效的符号(?)。如有任何帮助，将不胜感激！)
浏览 4提问于2016-01-13得票数 2
回答已采纳
2回答
当我输入“view(Response)”时，Scrapy shell返回一些不满意的内容：“您的搜索与任何文档不匹配。尝试使用较少限制的搜索条件，也许我们可以找到一些东西。”我将从每个搜索结果页面获取所有链接，并解析适合给定查询的每一篇文章(本例中为“war”)。
我发现了一个与此相关的案例：，我的问题是否有相同的根源，而cnn.com却阻止了机器人？
浏览 0提问于2019-02-28得票数 0
回答已采纳
1回答
我正在尝试使用Python (requests模块)和以下代码从一个交换网站(chiliz.net)提取信息：
data = requests.get(url,time.sleep(15)).text我使用了time.sleep，因为该网站没有直接连接到交换主页，但我不确定这是必要的。问题是，我在HTML (本例中是data变量)中找不到任何在<body style>下编写的内容。我怎样才能获得完整的HTML代码，然后开始从这个网站上提取价格信息？我知道Py
浏览 0提问于2020-12-11得票数 0
2回答
我正在尝试从这个网站上抓取数据:例如https://www.dailyfx.com/sentiment，我想知道有多少客户做多欧元/美元，但我无法获得span标记内的文本。html.parser')
print(span) “”“ 我得到的返回值是： <span class="bullish-co
浏览 74提问于2019-04-21得票数 1
回答已采纳
我试着使用selenium chromedriver浏览器进行清除，我发现页面获得了我想要的信息，并且仍然在加载。我不会一直等待，所以有没有一个函数可以停止加载页面并完成其余的代码？after two seconds from calling the Navigate function CD.FindEleme
浏览 1提问于2017-08-28得票数 0
2回答
然而，下面提供的标准代码只适用于其中一个()。对于苏富比拍卖行，代码不返回任何内容()，对于佳士得拍卖行，它返回您无法使用的奇怪链接，因为它们会导致错误()。page.text print(link.get('href'))
这些网站可能有什么问题
浏览 0提问于2020-06-08得票数 0
3回答
我正在努力学习如何使用python库BeautifulSoup，例如，我想在Google航班上节省一次航班的价格。因此，我连接到谷歌航班，例如在，我想得到最便宜的航班价格。因此，我将在div中得到这个类的值“gws-比对-结果_巡回-价格”(如图中所示)。from bs4 import BeautifulSoup
url = 'https://www.google.com/flights'ht
浏览 1提问于2019-03-28得票数 6
回答已采纳
我试图制造一个机器人，一旦一个新产品在网站上上线，就给我发一封电子邮件。import requests接下来，我想在
浏览 1提问于2020-07-23得票数 1
我有很多Mega.nz档案的链接，我需要这些链接来抓取(显示在页面上的文本)的文本内容，但是我不知道怎么做。但是，当我查看页面的源代码时，我得到了以下内容：并且该页面上的任何链接也不会导致任何文本信息！我通常要做的是使用Python下载源代码HTML，然后分析它，但显然在这种情况下这是行不通的。我可以使用google chrome中的Control +F手动搜索每个存档的文本，但是我有数百个这样的文档，我需要从这些文档中获
浏览 1提问于2018-05-25得票数 2
回答已采纳
275784337_2_0_0__139646;srepoch=1632033539;srpvid=af482ec1c5c20263;type=total;ucfs=1&#tab-reviews" 我使用的是我从浏览器上逐字复制的
浏览 7提问于2021-09-20得票数 0
1回答
我尝试使用Document.getElementsMatchingOwnText("Apply")，但它没有返回元素。我已经尝试列出所有的锚元素并打印它们的文本，我看不到任何带有文本“应用”的元素。输出结果如下 锚点文本已登录 锚的文本是职位搜索 锚的文本是我的Jobpage 锚点的文本正常 锚点的文本正常 锚的文本是提交朋友的个人资料 锚点的文本是查看所有作业 锚的</
浏览 84提问于2019-05-20得票数 0
回答已采纳
我需要建立一个Python刮板，从一个网站的内容只显示后，用户点击与Javascript onclick函数绑定的链接，页面不会被重新加载的数据。为了做到这一点，我研究了Selenium，并尝试了一下，似乎每次我实例化一个驱动程序时，Selenium都会打开一个新的Firefox web浏览器：这个开放的浏览器是
浏览 1提问于2013-03-03得票数 1
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
云直播
对象存储
实时音视频活动推荐
腾讯云开发者
