前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >小工具 | 网站数据抓取(以GLASS数据为例)

小工具 | 网站数据抓取(以GLASS数据为例)

作者头像
GIS与遥感开发平台
发布2022-04-29 09:00:34
1.6K6
发布2022-04-29 09:00:34
举报

今日简介

在之前介绍GLASS数据的时候,有小伙伴问如何对GLASS数据进行批量下载。毕竟每一年的数据量都还是比较多,用手一次次的点也不方便。

今天,我们就来介绍一个小工具,不用Python就可以把马里兰大学官网上的GLASS数据爬取下来。

IDM下载软件

IDM是国外优秀下载工具,可提升下载速度,能安排下载计划,或续传下载一半的下载软件。同时,我们也可以利用它对网站数据进行爬取。

下面我们以LAI(0.05度)数据为例,把下载的过程给大家演示一下。

首先看一下网站上的LAI数据

我们打开IDM软件,点击站点抓取。

将LAI(0.05度)数据的网址,

http://www.glass.umd.edu/LAI/AVHRR/

输入到开始页面/地址,点击前进。

选择所有文件保存到同一目录,并选择保存路径,同时勾选使用原来的相对路径,点击前进

这一步记得勾选不要探索父目录。

点击标黄的添加过滤器。

点击添加

名称随便填,这里我们取hdf,类型填*.hdf(代表所有hdf文件),点击确定。

点击下载下列文件的下拉框,选择我们刚才创建的hdf(代表我们只下载hdf文件),勾选同时开始下载所有匹配的文件,点击前进。这样我们就开始下载啦。

点击左上角标黄的区域,我们就可以看到任务的进度啦!

最后,一起来看看我们下载的结果把!

好了,今天我们的分享就到这里啦!IDM的安装包我们也帮大家准备好啦!后台回复IDM获取安装包。小伙伴们如果觉得文章对你有帮助的话,欢迎点击在看,分享文章哦!

本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2020-06-30,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 GIS与遥感开发平台 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档