1回答
helper (chrome扩展)时，它完美地显示了内容，但当它进行抓取时，它返回"None“或"empty"：Web：https://cutt.ly/bjj3ohW the number --NN是它测试的表单/*[@id="da_price"]/text())，.get('')，.extract()，.get('').strip()，Css #da_price，#da_price::text，我也用过漂亮的汤和scr
浏览 14提问于2021-01-08得票数 1
回答已采纳
1回答
我正在用python在一些页面上做web抓取，我已经被其中的一些阻止了。当我试图通过TOR浏览器检查它时，我已经看到我无法访问页面，所以我认为这些页面已经能够跟踪我所有的IP或我没有很好地配置TOR (我认为不是因为我用Chrome和TOR检查了我的IP地址和TOR是不同的)，所以，有人知道为什么吗？此外，我正在尝试在我的python代码中执行一个函数或方法来自动更改mi IP。我所看到的是，最好的
浏览 19提问于2020-05-21得票数 2
回答已采纳
1回答
(我想我成功地点击了它，但是在webdriver打开的Chrome窗口中，当我向下滚动到按钮时，会说‘我们很抱歉，加载下一页搜索结果时出现了问题’。我刚开始使用网络刮擦器，我对此做了大量的研究，有几个类似的问题，但这些答案都没有帮助。我真的需要一些帮助。这是我的代码：driver = webdriver.Chrome(executable_path=driver_path# print(5)
浏览 2提问于2022-11-24得票数 0
通过使用以下代码web.DownloadFile("url", "filename");注意：给我你最好的建议来实现这一点。
浏览 1提问于2021-09-25得票数 2
1回答
我是网络抓取的新手，所以请容忍我的代码：import urllib2import mechanize
browser
浏览 0提问于2015-08-18得票数 0
2回答
Python没有结果
、、、
我正在用Python制作一个基本的/Spider。我试图通过一个YouTube频道，并打印所有标题的视频，但它的从来没有返回任何东西。到目前为止，我的代码如下：from bs4 import BeautifulSoup
url = 'https://www.youtube.com/c/DanTDM/一个空的列表(这意味着它没有找到任何东西)。我要知道我做错了什么。
浏览 6提问于2022-07-17得票数 0
我有个关于点击的问题。访问应用程序登录页面(如https://example.com/login.html )。在此页面上没有点击保护(即X-Frame-Options头)。登录后，您将被重定向回站点https:/
浏览 0提问于2019-09-11得票数 2
我无法使用以下代码从OpenTable网站获取https。然而，当我尝试使用相同的代码从其他网站获取数据时，例如Instagram，它可以工作。因为我刚开始学习使用node js的web scraping，你能告诉我可能是什么问题吗？
浏览 53提问于2021-05-23得票数 0
回答已采纳
我有一些关于injectFile的基本问题：
什么时候重新注释使用injectFile(代码)而不是page.evaluate(代码，.)要让代码进入要刮掉的页面？使用injectFile(代码)有哪些不同/优缺点，例如在性能、抗刮擦检测等方面？如何通过替换gotoFunction和实现page.on(“domcontentloaded”，.)来实现injectFile(代码)？活动，像我一样？或者有没有更好的</e
浏览 4提问于2019-11-07得票数 0
2回答
Javascript防止点击劫持
、、、、
我的应用程序中有这个Javascript片段来防止点击： var style = document.createElement} else { }基本上，在默认情况下，它创建一个样式元素(CSS动态)来隐藏当前页面的主体因此，这样做，
浏览 5提问于2011-11-17得票数 0
回答已采纳
1回答
我正在尝试使用和服刮亚马逊的结果页。例如，我在Amazon.co.uk搜索引擎上输入"Sony“，想要抓取结果以获得产品名称。我能够做到这一点为一个页面，但我想刮多页使用分页功能。我选择“下一页”作为分页的链接，但是我得到了一个E20错误。谢谢!浮点
浏览 1提问于2015-11-30得票数 0
我有一个web刮刀脚本，它在我的(Windows) PC上运行良好，但我试图让它从一个(Linux) web服务器上运行。我有许多其他脚本在服务器上运行良好(连接到与此不同的网站)，但是当我运行这个脚本时，我会得到一个[Errno 111] Connection refused错误。下面是这个脚本的一个最低版本来演示这个问题：import requestsfrom bs4 import BeautifulSoup，这里的问题可以归结为here服务器上<
浏览 3提问于2019-03-31得票数 8
我试图使用python中的请求模块从获取数据r = requests.get(url , headers= header)在html的回复中-我看到那个网站要求完成captcha。
有什么可以跳
浏览 2提问于2020-06-24得票数 0
1回答
我发现我们可以使用代理或随机的用户代理来远离防刮检测。因为当我理解这两者都用于隐藏原始客户端请求标识时，我感到很困惑。
如果我理解错了，请告诉我
浏览 5提问于2016-08-11得票数 4
1回答
我试图刮数据从espncricinfo网站，我是要求网页的每一场比赛，但有时会出现错误后，10场比赛，或20甚至2有时，但它没有得到完整的下面是我的代码和我的错误帮助我解决。我使用request.get()方法从给定的链接中获取网页from bs4 import BeautifulSoupimport
浏览 9提问于2020-07-09得票数 3
1回答
我正在使用Jsoup库从这个站点提取数据： protected Void doInBackground(Object[] params) {
doc =相反，这个网页不显示为1MB，所以我首先使用我自己的值，但不总是工作。对于一个我不明白的问题，当我处于调试模式，并将变量doc视为Document时，该网页有时会下载所有内容，而其他的则不会。然后，我尝试将maxBodySize的值更改为，然后改为，，还有超时值，读取其他帖子和搜索互联网，但这并没有解决问题。
浏览 1提问于2015-11-20得票数 1
我已经搜索了很长一段时间了，关于如何查看基于PHP表单的搜索结果的客户端网站，从牙买加黄页的数据。<form action="http://jamaicayp.com/Jamaica-Kingston/<?
浏览 5提问于2015-06-28得票数 0
回答已采纳
1回答
我正试图从offerup.com和刮壳中获取一些信息，什么都没有。我将键入：它会出现在那里，但如果我只想得到整个网页的文本，就可以：回来的还有：
['Request unsuccessful.Incapsula incident ID: 623000250007296502-10946686267359632'
浏览 4提问于2017-07-26得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
云直播
对象存储
实时音视频活动推荐
腾讯云开发者
