1回答
我使用requests和urllib3抓取了的“不完整”源代码。源代码是不完整的，因为它将只包含4个列出的项目，而不是20个。查看结果源代码，我们发现以下提示是“加载”/分页问题(行号2191)。我设法获得的完整源代码可以在这里查看：
<div class="error alert js-ErrorGeneric t_center padding_top_
浏览 18提问于2019-08-09得票数 1
回答已采纳
1回答
我有一个用C#实现的桌面应用程序。这个应用程序上传文件到远程web服务器，我想抓取所有的http请求从这个应用程序发送。可以抓取吗？如果我的问题不完整，我很抱歉。
浏览 0提问于2012-03-21得票数 2
回答已采纳
1回答
on_load_extract(data){ alert(datos);我使用xmlHttpRequest检索youtube的内容，但是响应中显示的页面代码并不完整。在javascript中有一个表单可以检索页面的完整源代码吗？
浏览 1提问于2013-01-13得票数 0
回答已采纳
我正在尝试从espncricinfo获取个人球员的实时得分和得分，但我无法检索到： app.get('/scrape', function(req, res){
url = 'http://www.espncricinfo.com/indian-premier-league
浏览 2提问于2014-05-07得票数 0
使用Rational (又名Jazz源代码管理)将一个新的存储库工作区加载到沙箱中时，我遇到了错误CRRTC8550E，而产生的沙箱是不完整的。我正在使用Windows 10、Visual 19和Visual的RTC插件(6.0.6.1)。
浏览 10提问于2022-01-12得票数 1
回答已采纳
1回答
抓取时有没有使用哪些标签的逻辑？现在，我只是在对不同的标签变体进行“反复试验”，看看哪种标签是有效的。这需要很多时间，而且真的很令人沮丧。我不能理解为什么有些标签能工作，有些不能。div', attrs={'id':'YDC-Lead-Stack-Composite'})为什么第一个例子(test1)返回值，第二个例子(test2)没有返回值，有什么合理的解释吗有没有一种有效的方法来知道哪些标签会起作用？
浏览 0提问于2020-05-25得票数 0
1回答
我正在使用Selenium和Firefox在Python中进行抓取。HREF = node.find_elements_by_xpath(".The LinkThe Link1.5
注意，最后一个属性打印是空的，
浏览 7提问于2017-11-03得票数 2
回答已采纳
1回答
我正在尝试爬行一个电子商务目录，其中的产品数据是使用Ajax响应加载的。有没有什么方法可以让我发起一个请求，并在一段时间后记录响应？
浏览 16提问于2016-09-20得票数 0
回答已采纳
3回答
我有一个网络浏览器，还有一个Visual Studio的标签，基本上我想做的就是从另一个网页上抓取一个部分。我尝试使用WebClient.DownloadString和WebClient.DownloadFile，在JavaScript加载内容之前，这两个工具都给了我网页的源代码。我的下一个想法是使用web浏览器工具，在页面加载后调用webBrowser.DocumentText，但这并不起作用，它仍然给我提供了页面的原始源代码。有没
浏览 0提问于2014-06-18得票数 21
回答已采纳
1回答
我正在尝试用Python抓取一个quizlet匹配集。我想用class：TermText抓取所有的<span>标签import requestsraw最终返回的内容根本不包含任何标签或卡片当我检查网站的源代码时，它显示了我需要的所有TermText跨度，这意味着它不是JS加载的。因此，我不明白为什么我的HTML是错误<
浏览 18提问于2020-07-31得票数 1
回答已采纳
1回答
在Nexus 5上，我试图复制Facebook应用程序的开源软件许可证，这个许可证非常长，但失败了。全选成功，但无法复制或共享。
浏览 3提问于2014-02-26得票数 14
我有一个使用javascript的动态表。当页面加载时，只看到源代码中的第一个元素，所以当我试图从元素中抓取值时，只会看到第一部分。在抓取之前，我需要在表div中向下滚动，然后刮除值。那么，如何在特定的div中向下滚动以加载表中的所有数据？
浏览 3提问于2021-05-13得票数 0
回答已采纳
(因为externalhtml.com服务器将额外的x-option-frame:SAMEORIGIN头发送到请求的文件头和未加载到iframe或frame中的html页面。)我测试了一些其他的标签。(我只想抓取html文件和x-options-frame的源代码，只影响iframe和frame标签！)带有标签的mydoman.com页面的源代码是：
但是当我检查带有firebug的页面时，在脚本标
浏览 0提问于2012-09-26得票数 0
1回答
抓取动态加载的网站
、、、
当我使用cURL加载页面"“，或者尝试抓取页面时，响应主体是空的。显然，该页面是使用JavaScript动态加载的。此外，为了理解动态<
浏览 0提问于2018-04-12得票数 2
2回答
我想从Amazon中提取一些数据(下面代码中的链接)import urllib2doc=open("test.html","w")doc.close()
当我打开test.html时，我页面的内容与互联网上的网站不同
浏览 2提问于2014-03-05得票数 0
回答已采纳
1回答
我正在使用Selenium和Chrome驱动程序来删除包含SVG的页面。我需要一种让Selenium等到svg完全加载的方法，否则当我放弃时，我会得到一些不完整的图表。目前，脚本等待10秒后才开始清除，但对于20000页的抓取来说，这是一个很大的负担。driver.find_element_by_xpath(path)
wait.until(page_loaded)
在
浏览 0提问于2018-10-01得票数 2
在过去的两天里，我一直在完善一个我想抓取的网站的网址列表。我的脚本(除了数据提取之外，它与的示例基本相同)正在运行，但有一个问题。数据存储中本地保存的某些文档是不完整的。例如，从示例脚本中可以看出，在某些已保存的数据中，title字段是空的。在其他情况下，它都被保存下来了。每次保存的唯一字段是url: request.url。我最好的猜测是，我正在爬行的<
浏览 34提问于2019-07-21得票数 0
回答已采纳
1回答
我想从我的PHP程序中完成这个“抓取”。我已经使用Firebug抓取了帖子数据。但它未能获得相同的数据。我试着删除参数等，但都不起作用。该站点返回错误“对不起，本站点遇到严重问题，请尝试重新加载页面或联系站长。”这是我使用的源代码：。
浏览 0提问于2013-04-08得票数 0
我正在尝试用Mechanize抓取一个网页，结构如下： <div class="listings-wrap">我有什么地方做错了吗？我以为使用CSS选择器就可以了。
浏览 11提问于2016-09-28得票数 1
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
腾讯会议
云直播
对象存储活动推荐
腾讯云开发者
