XiongxinXiao的个人博客分享 http://blog.sciencenet.cn/u/XiongxinXiao

博文

再分析数据的下载(GLDAS和MERRA2)

已有 16147 次阅读 2019-10-29 19:53 |系统分类:科研笔记| 再分析数据, 数据下载, 科研学习

以下是对我下载数据方法的记录,供其他研究者参考学习。


由于需要使用再分析数据,看了很多的博客会使用到wget或python爬虫的方法,NASA有些数据网站也会推荐这两种办法的具体操作步骤如下所示的链接

NASA的GES DISC网站里的方法:https://disc.gsfc.nasa.gov/data-access(供网友参考),之前也尝试过这些方法,但是我探索到一种新的数据下载方法,下载速度会更快。


我相信经常使用遥感数据的研究者对于EARTHDATA(https://earthdata.nasa.gov)这个网站不是很陌生。(PS:没有这个网站账号的,需要先注册一个账号)

例如你需要下载MERRA-2 const_2d_ctm_Nx: Constant Model Parameters for Usage by CTM 0.625 x 0.5 degree V5.12.4 (M2C0NXCTM 5.12.4) 这个数据,你只需要把后面的short name (M2C0NXCTM 5.12.4) 输入到https://earthdata.nasa.gov网站中

image.png


然后就会看到搜索结果如下如所示:
image.png


点击红色框的链接---->就进入到下面的网页

image.png

点击上图中的红色框中的Earthdata search的链接,即会得到下图的数据结果:(其实可以直接在下图的数据搜索页面内找数据)

image.png

点击所筛选得到的数据,就会得到下图所示的数据。由于例子数据只有一组数据(具体为什么只有一组数据在此不做深究),如果数据很多的话,可以进入下图红色方框进行筛选,选取适合自己研究时间段内的数据。

image.png

当选择好数据后,点击Download all---->(进入下一个网页)点击Done---点击Download data

就会进入下个网页,标记有下载数据的URL和下载脚本文件的链接;如下图所示:

image.png

而在本处,我们选择Download data links .然后把你所要的所有数据的URL都可以获取到。存储为一个txt 文档。


接下来我们更换一个很神奇的浏览器火狐浏览器(5.*)不能是6.*版本的;有需求的自行百度。以前我都是使用dos命令窗的下载数据(使用的就是上图中所提供的的脚本文件),极慢!!!一般都是~200 kbs/s  


现在则使用DownThemall 插件下载数据,运行速度可以达到2~5 MB/s 。以现在我的正在下载的数据为例,展示DownThemall的使用。如下图所示

image.png


很明显的看到这个数据的下载比脚本文件,以及wget的下载速度快很多(通过我的实验得出的结论)

-------后补信息-----

我试着搜索了一些downthemall (https://www.appinn.com/downthemall-4-is-back/),会看到很多关于此插件的使用方法。


当然此方法可以迁移到很多数据的下载中去。

好记性不如一个笔记本!!!


End



https://wap.sciencenet.cn/blog-1109904-1203964.html

上一篇:Matlab 的颜色设置
下一篇:再分析数据(ERA-5)数据下载
收藏 IP: 202.114.121.*| 热度|

0

该博文允许注册用户评论 请点击登录 评论 (0 个评论)

数据加载中...
扫一扫,分享此博文

Archiver|手机版|科学网 ( 京ICP备07017567号-12 )

GMT+8, 2024-12-22 00:57

Powered by ScienceNet.cn

Copyright © 2007- 中国科学报社

返回顶部