腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
圈层
工具
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
3
回答
如
何在
发布
和
点击
后
对
页面
进行
抓取
和
解析
?
、
、
当在网页(https://www.internationalparceltracking.com/#/search)中
进行
查询时,URL不会改变,因此不可能通过URL发送查询。(url=url, data={'placeholder':'3SABC1234567890'}) print(r.text) 最后,我不想使用selenium (就像打开额外的浏览器),查询是在地下
进行
的
浏览 4
提问于2019-06-27
得票数 0
回答已采纳
1
回答
抓取
aspx
页面
的Python代码是什么?
、
、
、
、
因此,我的目标是每次传递mcode,然后将生成的aspx
页面
打印为pdf。请原谅我的简体语言,因为我对此还不熟悉。
浏览 2
提问于2020-03-18
得票数 0
1
回答
无法做到这一点:按钮的onClick,
抓取
当前
页面
的URL并
发布
到zapier webhook
、
我有一个
页面
上的按钮
和
一个成功触发按钮的GTM标签是
点击
。我似乎想不出应该发生的自定义HTML,所以当人们
点击
按钮时,它会
抓取
按钮所在的
页面
URL,并简单地将其
发布
到Zapier webhook (我可以从中
解析
和
处理)。 仅供参考,
页面
url的格式为:
浏览 0
提问于2020-05-10
得票数 1
3
回答
爬虫/蜘蛛
对
新站点的检测
我有很好的使用c#
和
vb.net的开发经验,但我需要一些指导。我想开发像搜索引擎这样的蜘蛛
和
爬虫,但我不知道如何: 如何检测修改过的
页面
?
浏览 1
提问于2013-03-30
得票数 3
1
回答
具有单击处理程序
和
href属性的链接,哪个是由Googlebot调用的?
、
我的站点上有以下锚代码:对于人类用户,onclick将在不刷新
页面
的情况下使用它是否会忽略onclick,直接转到href中给出的
页面
,或者处理onclick,或者在索引我的网站时两者都做? 雅虎
和
必应也面临同样的问题,但最重要的是谷歌。
浏览 0
提问于2018-04-19
得票数 1
6
回答
如何知道被
抓取
的网站是否发生了变化?
、
、
我正在使用PHP
抓取
一个网站并收集一些数据。无需使用正则表达式即可完成所有操作。我使用php的explode()方法来查找特定的HTML标记。如果网站的结构发生变化(CSS、HTML),那么
抓取
器可能会收集错误的数据。所以问题是-我如何知道HTML结构是否发生了变化?如
何在
将任何数据存储到我的数据库之前识别这一点,以避免存储错误的数据。
浏览 1
提问于2010-03-28
得票数 8
回答已采纳
1
回答
我如
何在
Android网页上填写表格?
、
你如
何在
Android程序的网页(不受我控制)上填写一张表格? 重复如果我不使用Android,我会使用库库,比如li
浏览 3
提问于2010-08-29
得票数 2
回答已采纳
1
回答
如何创建一个插件“记录”网络执行步骤到一个文件?
、
、
、
我想为浏览器创建一个插件(最好是JavaScript),这样用户就可以动态地定义
抓取
执行序列(记录一个脚本,该脚本稍后将被解释
和
执行,用于实际的
抓取
)。其想法如下: 可以循环
抓取
浏览 3
提问于2012-08-21
得票数 0
1
回答
如何使用Prometheus监视web场景
、
、
、
我有一个web应用程序,它由多个
页面
组成,需要使用web表单
进行
身份验证。我想确保应用程序工作正常,仅仅检查登录
页面
是不够的,我需要确保几个
页面
作为一个检查的一部分正确加载,并且整个场景不会超过X秒。还需要检查用于该web应用程序的SSL证书。例如:打开登录
页面
,键入用户名
和
密码,然后单击链接,然后单击按钮并检查结果是否有预期的关键字。结果显示为一个图,显示场景的每一步的执行时间。
浏览 5
提问于2022-03-16
得票数 2
1
回答
Facebook的分享链接没有刷新交叉
发布
的标题
、
、
我在想如何更新交叉
发布
的标题。如果我使用ShareThis分享我的链接,它会通过打开的图形
抓取
标题、描述
和
图片,但当我在Facebook上
点击
链接
进行
转发或其他人这样做时,它不会拾取更新
后
的图片或标题。这是否可以通过meta标签、og:tag或其他选项
进行
更新或强制执行。
浏览 1
提问于2011-10-25
得票数 0
回答已采纳
1
回答
使用Python
抓取
Selenium JS地图
、
、
我
对
Selenium是个新手,实际上我从昨天就开始尝试了,我发现了一些关于Selenium
和
python的有趣的东西。 我找到了一些关于如何
抓取
JS
页面
并与之交互的信息。但我的疑问是,如何使用selenium从可
点击
的地图中获取数据。我试着找出
页面
中是否有隐藏的链接,但是没有。我计算出,当我将鼠标移到地图上的任何按钮(在地图中)时,x,y位置会发生变化(当然……)在我
点击
按钮
后
,我可以
抓取
我的数据。使用静态模型,我可以
抓取</
浏览 1
提问于2015-12-20
得票数 0
1
回答
无法在亚马逊网络服务上以编程方式从https://play.google.com/store/apps/获取网页内容
、
、
我有一个运行在AWS EC2上的java应用程序,它从上
抓取
应用程序信息,直到今天一切都运行得很好。似乎谷歌已经开始屏蔽服务器,因为频繁的
点击
。我在另一台服务器上尝试,它运行得很好,几个小时
后
也被阻塞Document doc = Jsoup.connect("https://play.google.com/store/appsid=" +appId).timeout(10000).get(); 我获取doc中的所有
页面
内容并
对
浏览 1
提问于2016-04-21
得票数 0
5
回答
如何使用r在谷歌学者上下载搜索结果?
、
准确地说,我只需要论文的名称,作者
和
引文计数。 另外,这是合法的吗?
浏览 4
提问于2011-02-15
得票数 21
回答已采纳
1
回答
如
何在
Heroku上
抓取
来自相同域的
页面
、
、
、
我创建了一个Facebook风格的URL
抓取
器来
发布
内容。是否有某种来源规则阻止Nokogiri
抓取</
浏览 0
提问于2013-02-09
得票数 0
回答已采纳
4
回答
如
何在
客户端C#应用程序中模拟JavaScript
、
、
我正在编写一个网络爬虫(网络蜘蛛),
抓取
网站中的所有链接。我的应用程序是一个Win32应用程序,用带有.Net Framework3.5的C#编写。现在,我使用HttpWebRequest
和
HttpWebResponse与web服务器
进行
通信。我还构建了自己的Http
解析
器,可以
解析
任何我想要的东西。但我不能解决一个问题:在
页面
中模拟客户端脚本(
如
JS
和
VBS),例如,如果链接如下: A href = "javascript:buildLin
浏览 1
提问于2009-05-27
得票数 4
1
回答
在缺陷趋势应用上请求现有源代码
我只是想让现有的应用程序按交付版本
进行
过滤(当前按迭代/
发布
进行
过滤)。谢谢伙计们!
浏览 1
提问于2015-06-12
得票数 0
1
回答
python中的多级/多
页面
web
抓取
、
、
我对数据
抓取
很陌生,我很少检查过关于刮伤
和
漂亮汤的资源,但是我正在努力解决下面的问题。现在我需要收集部分的内容-概述,便利设施,规格等,然后回到以前的列表
页面
,并重复这对所有项目列出的
页面
。同时,
点击
next按钮并
对
所有条目重复相同的操作。 请告诉我如
何在
python中为这个用例实现一个
抓取
算法。
浏览 1
提问于2019-01-15
得票数 0
回答已采纳
1
回答
按钮单击事件在asp.net中未触发
、
、
、
它是用C#(完全没有经验).NET(一点经验)编写的,使用了AJAX(没有经验)
和
Jquery(一点经验)。我写了一个小方法,从网页中
抓取
文本并将其
解析
成文本文档。我想让它在用户按下“
发布
”按钮时触发。namespace MaintainTenderFiles.ajax public partial class publish
浏览 0
提问于2012-04-25
得票数 0
回答已采纳
1
回答
启用运行Scrapy项目
、
、
、
我
对
Scrapy非常陌生,我在终端中使用这一行"scrapy startproject tutorials"设置了我的项目,我使用的是Visual代码。我检查了SPIDER_MODULES
和
NEWSPIDER_MODULE在蜘蛛> setting.py中写得很好import scrapy class QuoteSpider(scrapy.Spider
浏览 1
提问于2020-02-25
得票数 0
回答已采纳
5
回答
抓取
Ajax -使用python
、
、
我正试着用python在youtube上废弃一个
页面
,里面有很多ajax 每次我都要调用java脚本来获取信息。但我真的不知道该怎么做。我正在使用urllib2模块打开URL。任何帮助都将不胜感激。
浏览 0
提问于2009-08-15
得票数 2
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
热门
标签
更多标签
云服务器
ICP备案
云直播
对象存储
实时音视频
活动推荐
运营活动
广告
关闭
领券